AI 新視界 AI WorldviewAI 新視界 AI Worldview
申請帳號 / 登入

← AI 實驗室 實測查詢

模型頁|數字全部來自本站量測紀錄,由程式整理

Llama-3-Taiwan 70B Instruct

開發者
Taiwan LLM(林彥廷)
參數量
70.6B
本站使用的量化
Q4_K_M(本站量化)
授權
Llama 3 Community License(Hugging Face 模型頁 yentinglin/Llama-3-Taiwan-70B-Instruct,2026-10-14 查核)
來源
台灣模型

台灣模型|Taiwan LLM 系列,以 Llama 3 70B 為基礎|本站從官方權重自行轉換並量化為 Q4_K_M(llama.cpp df18bee),聊天格式已與官方 tokenizer 逐 token 比對|只放得進 GB10

天梯榜名次

  • 繁中能力:第 1 名,共 8 個模型,平均 75.1 分
  • 綜合評價:第 1 名,共 8 個模型,平均 57.0 分

名次=1+「分數 95% 信賴區間下限高於自己上限」的模型數;差距不顯著就並列。

能力評測

每個項目取題數最多的一次(完整版優先),分數 0~100。答題結果主要取決於權重、量化、推論引擎與生成條件;換機器理論上不改變答案,但浮點運算在不同硬體上可能有細微差異,本站未逐一驗證跨機器一致性。

類別評測項目分數95% 信賴區間題數測試日期
綜合知識MMLU-Pro57.542~71402026/10/15
科學推理GPQA Diamond36.722~54302026/10/15
數學MATH-50053.336~70302026/10/15
聽懂指令IFEval60.045~74402026/10/15
繁中知識TMMLU+79.377~821,3402026/10/15
繁中對話MT-Bench 台灣版44.340~49802026/10/15
台灣在地TTQA(台灣在地知識)92.086~961132026/10/15
台灣法律題69.963~762092026/10/15
工具呼叫BFCL 單輪(non-live)82.568~91402026/10/15
程式LiveCodeBench v625.09~53122026/10/15
繁中閱讀理解DRCD(繁中閱讀理解)90.287~935002026/10/15

全部實測紀錄 3 筆