
关于JGLUE的培训和评估脚本,这是一个日语理解基准测试。
其他语言的说明
统计
统计数据截至 2026年11月17日
GitHub Star 数
18
±0 (10月13日〜)
最后提交
2026年11月
GitHub 创建日期
2023年3月19日
收录日
2024年1月14日
Star 数变化
以表格显示
| 月份 | Star |
|---|---|
| 2025年12月 | 18 |
| 2026年1月 | 18 |
| 2026年2月 | 18 |
| 2026年3月 | 18 |
| 2026年4月 | 18 |
| 2026年5月 | 18 |
| 2026年6月 | 18 |
| 2026年7月 | 18 |
| 2026年8月 | 18 |
| 2026年9月 | 18 |
| 2026年10月 | 18 |
| 2026年11月 | 18 |
各月最后一次快照。1,000 以上的 Star 数按 100 取整。
同分类的热门资源
JGLUEyahoojapan349JGLUE:日本通用语言理解评估
llm-jp-evalllm-jp175这个工具可以跨多个数据集对日语大规模语言模型进行自动评估。
jp-stabletree155JP语言模型评估工具
japanese-lm-fin-harnesspfnet-research80日语语言模型金融评估工具
japanese-llm-rankingyuzu-ai50该存储库支持YuzuAI的Rakuda排行榜,该排行榜是日本LLMs的日本重点模拟版本,类似于LMSYS的Vicuna评估。
japanese-llm-roleplay-benchmarkoshizo42这个存储库是为了评估日本语LLM角色扮演的性能而创建的。
研究领域相近的资源
- ELYZA-tasks-100elyza2k一个包含100个样本的日语指令微调评估数据集,包含已注释的任务——从摘要校正、数学推理到翻译、创意生成和用户意图理解——旨在对微调模型进行手动或自动的5分制评分。HF 数据集共同: 标注与数据集构建
- qg_jaquadlmqg494Japanese JaQuAD,QG‑Bench 的一个子集,提供句子级和段落级的数据,包含高亮的答案词元,用于训练日语问句生成模型,并通过 BLEU4、METEOR、ROUGE‑L、BERTScore 和 MoverScore 进行评估。HF 数据集共同: 标注与数据集构建
- zenz-v2.5-datasetMiwa-Keita439一个190 M对的JSONL数据集,用于日语假名到汉字转换,包含“左上下文–输入–输出”三元组,并预训练模型(medium、small、xsmall)以及AJIMEE-Bench基准测试。该数据集以CC BY‑SA 4.0授权发布,子集来源于Wikipedia和Common Crawl。HF 数据集共同: 标注与数据集构建
- emilia-yodasTTS-AGI18k来自 Fate/Stay Night 的角色 “Emilia” 的对话和背景故事数据集,格式化用于训练和评估会话语言模型。HF 数据集共同: 标注与数据集构建
- JamC-QAsbintuitions2kJamC‑QA 是一个双语基准,涵盖八个日本文化与知识类别的多项选择题,排行榜指标用于比较最先进模型。HF 数据集共同: 标注与数据集构建
ajimee-benchazookey30AJIMEE-Bench(高级日语输入法评估基准)共同: 标注与数据集构建