JMMLU 是一個日本大型多任務語言理解基準,包含 7,536 個由教師精心編寫的問題,涵蓋 56 個科目,包含專業醫學、心理學、會計、哲學,以及多種高中學科。
其他語言的說明
統計
統計資料截至 2026年11月16日
Hugging Face 下載數(近 30 天)
1,000
Hugging Face 按讚數
14
收錄日
2024年5月13日
下載數(近 30 天)變化
以表格顯示
| 月份 | 下載(30天) |
|---|---|
| 2025年12月 | 548 |
| 2026年1月 | 321 |
| 2026年2月 | 544 |
| 2026年3月 | 780 |
| 2026年4月 | 676 |
| 2026年5月 | 910 |
| 2026年6月 | 480 |
| 2026年7月 | 402 |
| 2026年8月 | 762 |
| 2026年9月 | 2,000 |
| 2026年10月 | 1,000 |
| 2026年11月 | 1,000 |
各月最後一次快照時的近 30 天下載數。
同分類的熱門資源
- emilia-yodasTTS-AGI18k來自 Fate/Stay Night 角色「Emilia」的對話與傳說資料集,格式化用於訓練與評估對話語言模型。
- fgo_voices_jpdeepghs10kFGO Waifu 的 JP Voice‑Text 資料集:包含 30,800 條記錄、66.4 小時的日語音訊集合,涵蓋單一配音員角色台詞(每條約 7.76 秒),適用於 ASR/ASV 微調與評估。
- JGLUEshunk0313k更新了 JGLUE 數據集卡和載入腳本,適用於由 Yahoo Japan 和 Waseda University 創建的日本 NLP 基準,涵蓋文本分類(MARC‑ja、JCoLA)、句子對分類(JNLI)和 QA(JSQuAD、JCommonsenseQA),發布版本已在 GitHub 和 Hugging Face 上連結。
- JMTEBsbintuitions3kJMTEB 是一套日語文本嵌入基準,包含 5 個任務(聚類、分類、STS、檢索、重排序)與 28 個資料集,提供一行式評估腳本並邀請社群貢獻。
- JMMMUJMMMU3kJMMMU 是一個日語多模態基準,已擴充十倍至 1,320 個文化多樣化問題 (720 個文化中立,600 個文化特定),由母語專家翻譯,現在擁有公開排行榜。
- JamC-QAsbintuitions2kJamC‑QA 是一個涵蓋八個日本文化與知識類別的雙語多選題基準測試,並以排行榜指標對比最先進模型。
研究領域相近的資源
- jhumanevalkogi-jwu731JHumanEval 是手工翻譯的日本版 HumanEval benchmark,提供 164 個 Python 程式設計問題,並提供對應的英文與日文註解,旨在評估 Japanese-LLM 程式產生,同時保留原始英文錯誤。共同: 多語言・文本生成
small_parallel_enjaodashi9750k 英日平行語料庫,用於機器翻譯基準測試。GitHub共同: 多語言・文本生成
JASSMao-KU16JASS:針對日本特定序列的序列到序列預訓練,用於神經機器翻譯(LREC2020)和基於語言學的多任務預訓練,用於低資源神經機器翻譯(ACM TALLIP)。GitHub共同: 多語言・文本生成- databricks-dolly-15k-jakunishou1k一個自動翻譯的日語版 databricks‑dolly‑15k dataset,採用 CC‑BY‑SA‑3.0 授權,最後更新於 2023‑05‑11。共同: 多語言・文本生成
CourseraParallelCorpusMiningshyyhs15Coursera 課程挖掘和多階段微調,以改善講座翻譯GitHub共同: 多語言・文本生成
open-mantra-datasetmantra-inc208請將以下內容翻譯成繁體中文。
在AAAI21中介紹的《Towards Fully Automated Manga Translation》論文中介紹的數據集GitHub共同: 多語言・文本生成