VocabX：按成本定制词表的模型适配方法

Hugging Face 官方博客介绍了 Dharma-AI 即将发布的 VocabX 方法，其核心是按每个 token 的成本而非频率来定制词表。官方称，在葡萄牙语作文自动评分器上，该方法把实测推理成本降低了 77.0%，基准分从 0.703 升至 0.810，且不改变基础模型。 VocabX 是一种词汇表适配方法，即在不改动基础模型的前提下，通过调整模型使用的词表来优化性能。官方博客称，这一方法此前通常按词频来构建词表，而 VocabX 改为按成本定制。官方表示，相关论文即将发布，文中结果是论文即将公布的部分结果。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。