状态: 已发布数据所有权: 研究院所有许可: CC BY 4.0
HF-logits 一致性语料(逐家族 cosine/argmax)
在相同 input ids 下,各移植模型家族相对经验证 HuggingFace 参照的逐词元 logit 一致性测量。
用途
逐词元量化移植推理路径对参照实现的复现程度。
来源
通过在相同词元 id 上将各移植家族与 HuggingFace 参照对跑生成。
构成
可下载 CSV——逐家族结果:family、min_cosine_vs_hf_oracle、argmax_match、argmax_total(15 个模型家族)。是更大的逐词元语料的逐家族汇总。
已知偏差
- 覆盖仅限于所测量的移植家族与提示。
局限
- 一致性在固定词元 id 上离线检查,而非端到端。
访问条件
完整的逐家族一致性表可在下方以 CC-BY-4.0 下载。
| family | min_cosine_vs_hf_oracle | argmax_match | argmax_total | note |
|---|---|---|---|---|
| Qwen2.5-0.5B | 0.999979 | 12 | 12 | |
| SmolLM2-360M | 0.999998 | 12 | 12 | |
| Llama-3.2-1B | 0.999998 | 12 | 12 | |
| Mistral-7B-v0.3 | 0.999992 | 12 | 12 | |
| Phi-3-mini-4k | 1.000000 | 12 | 12 | |
| Qwen3-4B | 0.999989 | 12 | 12 | |
| OLMo-2-1B | 0.999998 | 12 | 12 | |
| StableLM-2-1.6B | 0.999997 | 12 | 12 |