實測查詢
本站實驗室測過的地端模型都在這裡:能力評測看分數,速度看各台機器上的實測。條件不同的結果不放在一起排名, 點模型名稱看它的完整成績。目前共 13 個模型有實測結果。
| 模型 | 開發者 | 繁中能力 ↓ | 綜合評價 | 已測項目 |
|---|---|---|---|---|
| Llama-3-Taiwan 70B Instruct台灣 | Taiwan LLM(林彥廷) | 75.1 | 57.0 | 11 |
| Llama-3-Taiwan 8B Instruct台灣 | Taiwan LLM(林彥廷) | 61.1 | 33.0 | 11 |
| Breeze2 8B Instruct台灣 | 聯發科創新基地 | 55.6 | 38.5 | 11 |
| Breeze 7B Instruct v1.0台灣 | 聯發科創新基地 | 49.7 | 30.4 | 11 |
| Gemma-3-TAIDE 12B Chat(2602)台灣 | 國家實驗研究院(TAIDE) | 49.3 | 40.7 | 11 |
| Llama-3.1-Taiwan 8B Instruct台灣 | Taiwan LLM(林彥廷) | 49.0 | 33.0 | 11 |
| Breeze2 3B Instruct台灣 | 聯發科創新基地 | 47.7 | 38.4 | 11 |
| Llama-3.1-TAIDE-LX 8B Chat台灣 | 國家實驗研究院(TAIDE) | 39.2 | 26.0 | 11 |
「抽樣版」:這個模型的繁中能力完整版(TMMLU+ 1,340 題、小題庫全測)還在排程,先列抽樣版分數;抽樣版題數少、誤差大,和完整版不宜直接比高低。
* 有項目還沒測完,平均只含已完成的項目,不列入天梯榜排名。