Metaphor
Search
搜索
暗色模式
亮色模式
探索
标签: tokenization
此标签下有5条笔记。
2026年5月18日
Tokenizer训练与设计指南
llm
tokenizer
tokenization
subword
bpe
sentencepiece
2026年5月12日
音频Tokenization与离散表示
audio
tokenization
vector-quantization
codec
2026年5月11日
Tokenization深入解析
tokenization
llm
nlp
bpe
wordpiece
sentencepiece
2026年5月05日
Token级对抗攻击
llm-security
tokenization
adversarial-attacks
2026年4月08日
自然语言处理基础
nlp
tokenization
word-embedding
seq2seq
attention
transformer
jieba分词