JMMLU 是一个日语大型多任务语言理解基准(Benchmark),包括 7,536 道教师精心制作的问题,覆盖 56 个学科,包括专业医学、心理学、会计、哲学以及各种高中学科。
其他语言的说明
统计
统计数据截至 2026年11月16日
Hugging Face 下载数(近 30 天)
1,000
Hugging Face 点赞数
14
收录日
2024年5月13日
下载数(近 30 天)变化
以表格显示
| 月份 | 下载(30天) |
|---|---|
| 2025年12月 | 548 |
| 2026年1月 | 321 |
| 2026年2月 | 544 |
| 2026年3月 | 780 |
| 2026年4月 | 676 |
| 2026年5月 | 910 |
| 2026年6月 | 480 |
| 2026年7月 | 402 |
| 2026年8月 | 762 |
| 2026年9月 | 2,000 |
| 2026年10月 | 1,000 |
| 2026年11月 | 1,000 |
各月最后一次快照时的近 30 天下载数。
同分类的热门资源
- emilia-yodasTTS-AGI18k来自 Fate/Stay Night 的角色 “Emilia” 的对话和背景故事数据集,格式化用于训练和评估会话语言模型。
- fgo_voices_jpdeepghs10kFGO Waifus的JP Voice‑Text 数据集:一个包含30,800条记录、66.4小时日本音频的集合,收录单一配音演员角色台词(每句约7.76秒),适用于ASR/ASV微调与评估。
- JGLUEshunk0313k更新了 JGLUE 数据集卡与加载脚本,适用于由 Yahoo Japan 与早稻田大学创建的日语 NLP 基准,涵盖文本分类(MARC‑ja、JCoLA)、句对分类(JNLI)以及问答(JSQuAD、JCommonsenseQA),发行链接保存在 GitHub 与 Hugging Face 上。
- JMTEBsbintuitions3kJMTEB 是一个日本文本嵌入基准,包含 5 个任务(聚类、分类、STS、检索、再排序)和 28 个数据集,提供一行评估脚本,并邀请社区贡献。
- JMMMUJMMMU3kJMMMU 是一个日语多模态基准,已扩大十倍至 1,320 个具有文化多样性的问题(720 个与文化无关,600 个与文化相关),由母语专家翻译,现在设有公开排行榜。
- JamC-QAsbintuitions2kJamC‑QA 是一个双语基准,涵盖八个日本文化与知识类别的多项选择题,排行榜指标用于比较最先进模型。
研究领域相近的资源
- jhumanevalkogi-jwu731JHumanEval 是 HumanEval 基准的人工翻译日语版本,提供 164 个 Python 编程问题,配有并行的英文和日文注释,用于评估日语 LLM 的代码生成,同时保留原始英文错误。共同: 多语言・文本生成
small_parallel_enjaodashi9750k英日平行语料库,用于机器翻译基准测试。GitHub共同: 多语言・文本生成
JASSMao-KU16JASS:面向日本特定序列到序列预训练的神经机器翻译(LREC2020)和基于语言驱动的多任务预训练的低资源神经机器翻译(ACM TALLIP)。GitHub共同: 多语言・文本生成- databricks-dolly-15k-jakunishou1k一个自动翻译的日语版本的databricks‑dolly‑15k数据集,许可为CC‑BY‑SA‑3.0,最后更新于2023‑05‑11。共同: 多语言・文本生成
CourseraParallelCorpusMiningshyyhs15Coursera语料库挖掘和多阶段微调,以提高讲座翻译质量。GitHub共同: 多语言・文本生成
open-mantra-datasetmantra-inc208在AAAI21年会上介绍的《全自动漫画翻译》论文中介绍的数据集
在AAAI21年会上介绍的《全自动漫画翻译》论文中介绍的数据集GitHub共同: 多语言・文本生成