Day 18·2 tokenizer.json → vocab.bin——build_vocab_bin.py 在干嘛
真机实测通过:本文实验已在 RK3588 板端实测完成(2026-09;方法学与原始记录见仓库 docs 与《实验脚本》目录) 一句话导读:build_vocab_bin.py 词表编译:把 7MB 的 tokenizer.json 编成 1,950,864 字节的 vo…
2026/9/23 7:29:40