AI 新視界 AI WorldviewAI 新視界 AI Worldview
申請帳號 / 登入

← AI 實驗室 實測查詢

模型頁|數字全部來自本站量測紀錄,由程式整理

Gemma-3-TAIDE 12B Chat(2602)

開發者
國家實驗研究院(TAIDE)
參數量
12.4B
本站使用的量化
Q4_K_M(本站量化)
授權
(Gemma 版次)TAIDE 模型授權條款+Gemma Terms of Use(Hugging Face 模型頁 taide/Gemma-3-TAIDE-12b-Chat-2602,需申請;2026-10-14 查核)
來源
台灣模型

台灣模型|國研院 TAIDE,以 Gemma 3 12B 為基礎|源自國研院 TAIDE 模型(taide.tw),依 TAIDE 授權條款標示:本站從官方權重自行轉換並量化為 Q4_K_M(llama.cpp df18bee,屬於修改),聊天格式已與官方 tokenizer 逐 token 比對|Gemma is provided under and subject to the Gemma Terms of Use found at ai.google.dev/gemma/terms

天梯榜名次

  • 繁中能力:第 4 名(並列),共 8 個模型,平均 49.3 分
  • 綜合評價:第 2 名(並列),共 8 個模型,平均 40.7 分

名次=1+「分數 95% 信賴區間下限高於自己上限」的模型數;差距不顯著就並列。

能力評測

每個項目取題數最多的一次(完整版優先),分數 0~100。答題結果主要取決於權重、量化、推論引擎與生成條件;換機器理論上不改變答案,但浮點運算在不同硬體上可能有細微差異,本站未逐一驗證跨機器一致性。

類別評測項目分數95% 信賴區間題數測試日期
綜合知識MMLU-Pro22.512~38402026/10/15
科學推理GPQA Diamond23.312~41302026/10/15
數學MATH-50070.052~83302026/10/15
聽懂指令IFEval47.533~63402026/10/15
繁中知識TMMLU+62.359~651,3402026/10/15
繁中對話MT-Bench 台灣版43.839~48802026/10/15
台灣在地TTQA(台灣在地知識)78.870~851132026/10/15
台灣法律題19.114~252092026/10/15
工具呼叫BFCL 單輪(non-live)40.026~55402026/10/15
程式LiveCodeBench v616.75~45122026/10/15
繁中閱讀理解DRCD(繁中閱讀理解)42.638~475002026/10/15

各台機器的生成速度

單人速度測試,每個情境量 5 次取中位數。不同機器的推論引擎、量化可能不同,跨列比較時請看條件欄。

機器引擎/量化短問題
tok/s|首字秒數
一般對話(約 2K token 上下文)
tok/s|首字秒數
NVIDIA RTX A6000(工作站,測試用單卡)ollama 0.32.13/Q4_K_M70.4|0.4065.1|2.22

全部實測紀錄 4 筆