模型頁|數字全部來自本站量測紀錄,由程式整理
Gemma-3-TAIDE 12B Chat(2602)
- 開發者
- 國家實驗研究院(TAIDE)
- 參數量
- 12.4B
- 本站使用的量化
- Q4_K_M(本站量化)
- 授權
- (Gemma 版次)TAIDE 模型授權條款+Gemma Terms of Use(Hugging Face 模型頁 taide/Gemma-3-TAIDE-12b-Chat-2602,需申請;2026-10-14 查核)
- 來源
- 台灣模型
台灣模型|國研院 TAIDE,以 Gemma 3 12B 為基礎|源自國研院 TAIDE 模型(taide.tw),依 TAIDE 授權條款標示:本站從官方權重自行轉換並量化為 Q4_K_M(llama.cpp df18bee,屬於修改),聊天格式已與官方 tokenizer 逐 token 比對|Gemma is provided under and subject to the Gemma Terms of Use found at ai.google.dev/gemma/terms
天梯榜名次
名次=1+「分數 95% 信賴區間下限高於自己上限」的模型數;差距不顯著就並列。
能力評測
每個項目取題數最多的一次(完整版優先),分數 0~100。答題結果主要取決於權重、量化、推論引擎與生成條件;換機器理論上不改變答案,但浮點運算在不同硬體上可能有細微差異,本站未逐一驗證跨機器一致性。
| 類別 | 評測項目 | 分數 | 95% 信賴區間 | 題數 | 測試日期 |
|---|---|---|---|---|---|
| 綜合知識 | MMLU-Pro | 22.5 | 12~38 | 40 | 2026/10/15 |
| 科學推理 | GPQA Diamond | 23.3 | 12~41 | 30 | 2026/10/15 |
| 數學 | MATH-500 | 70.0 | 52~83 | 30 | 2026/10/15 |
| 聽懂指令 | IFEval | 47.5 | 33~63 | 40 | 2026/10/15 |
| 繁中知識 | TMMLU+ | 62.3 | 59~65 | 1,340 | 2026/10/15 |
| 繁中對話 | MT-Bench 台灣版 | 43.8 | 39~48 | 80 | 2026/10/15 |
| 台灣在地 | TTQA(台灣在地知識) | 78.8 | 70~85 | 113 | 2026/10/15 |
| 台灣法律題 | 19.1 | 14~25 | 209 | 2026/10/15 | |
| 工具呼叫 | BFCL 單輪(non-live) | 40.0 | 26~55 | 40 | 2026/10/15 |
| 程式 | LiveCodeBench v6 | 16.7 | 5~45 | 12 | 2026/10/15 |
| 繁中閱讀理解 | DRCD(繁中閱讀理解) | 42.6 | 38~47 | 500 | 2026/10/15 |
各台機器的生成速度
單人速度測試,每個情境量 5 次取中位數。不同機器的推論引擎、量化可能不同,跨列比較時請看條件欄。
| 機器 | 引擎/量化 | 短問題 tok/s|首字秒數 | 一般對話(約 2K token 上下文) tok/s|首字秒數 |
|---|---|---|---|
| NVIDIA RTX A6000(工作站,測試用單卡) | ollama 0.32.13/Q4_K_M | 70.4|0.40 | 65.1|2.22 |
全部實測紀錄 4 筆
- 2026/10/15繁中能力(天梯榜完整版)NVIDIA GeForce RTX 5060 Ti ×2(工作站)
- 2026/10/15綜合評價NVIDIA RTX A6000(工作站,測試用單卡)
- 2026/10/15繁中能力NVIDIA RTX A6000(工作站,測試用單卡)
- 2026/10/15單人速度NVIDIA RTX A6000(工作站,測試用單卡)