huggingface-tokenizers
关于 huggingface-tokenizers
当用户提到“tokenizers”“HuggingFace tokenizer”“BPE”“WordPiece”，或询问“训练分词器”“自定义词表”“分词”“子词”“快速分词器”“文本编码”时使用
安装
复制下面的命令，在终端中运行。
$
npx skills add https:/安装后在 Claude Code 中输入/huggingface-tokenizers确认已加载。
评论
支持 Markdown