模型頁|數字全部來自本站量測紀錄,由程式整理
Llama-3-Taiwan 70B Instruct
- 開發者
- Taiwan LLM(林彥廷)
- 參數量
- 70.6B
- 本站使用的量化
- Q4_K_M(本站量化)
- 授權
- Llama 3 Community License(Hugging Face 模型頁 yentinglin/Llama-3-Taiwan-70B-Instruct,2026-10-14 查核)
- 來源
- 台灣模型
台灣模型|Taiwan LLM 系列,以 Llama 3 70B 為基礎|本站從官方權重自行轉換並量化為 Q4_K_M(llama.cpp df18bee),聊天格式已與官方 tokenizer 逐 token 比對|只放得進 GB10
天梯榜名次
名次=1+「分數 95% 信賴區間下限高於自己上限」的模型數;差距不顯著就並列。
能力評測
每個項目取題數最多的一次(完整版優先),分數 0~100。答題結果主要取決於權重、量化、推論引擎與生成條件;換機器理論上不改變答案,但浮點運算在不同硬體上可能有細微差異,本站未逐一驗證跨機器一致性。
| 類別 | 評測項目 | 分數 | 95% 信賴區間 | 題數 | 測試日期 |
|---|---|---|---|---|---|
| 綜合知識 | MMLU-Pro | 57.5 | 42~71 | 40 | 2026/10/15 |
| 科學推理 | GPQA Diamond | 36.7 | 22~54 | 30 | 2026/10/15 |
| 數學 | MATH-500 | 53.3 | 36~70 | 30 | 2026/10/15 |
| 聽懂指令 | IFEval | 60.0 | 45~74 | 40 | 2026/10/15 |
| 繁中知識 | TMMLU+ | 79.3 | 77~82 | 1,340 | 2026/10/15 |
| 繁中對話 | MT-Bench 台灣版 | 44.3 | 40~49 | 80 | 2026/10/15 |
| 台灣在地 | TTQA(台灣在地知識) | 92.0 | 86~96 | 113 | 2026/10/15 |
| 台灣法律題 | 69.9 | 63~76 | 209 | 2026/10/15 | |
| 工具呼叫 | BFCL 單輪(non-live) | 82.5 | 68~91 | 40 | 2026/10/15 |
| 程式 | LiveCodeBench v6 | 25.0 | 9~53 | 12 | 2026/10/15 |
| 繁中閱讀理解 | DRCD(繁中閱讀理解) | 90.2 | 87~93 | 500 | 2026/10/15 |
全部實測紀錄 3 筆
- 2026/10/15綜合評價NVIDIA GB10(ASUS Ascent GX10 第二台,llama.cpp)
- 2026/10/15繁中能力(天梯榜完整版)NVIDIA GB10(ASUS Ascent GX10 第二台,llama.cpp)
- 2026/10/14繁中能力NVIDIA GB10 第一台(ASUS Ascent GX10)