
JMED-LLM:大型語言模型的日本醫學評估數據集
其他語言的說明
統計
統計資料截至 2026年11月17日
GitHub Star 數
59
±0 (10月13日〜)
最後提交
2024年9月
GitHub 建立日期
2024年7月11日
收錄日
2024年7月15日
Star 數變化
以表格顯示
| 月份 | Star |
|---|---|
| 2025年12月 | 53 |
| 2026年1月 | 55 |
| 2026年2月 | 56 |
| 2026年3月 | 56 |
| 2026年4月 | 57 |
| 2026年5月 | 57 |
| 2026年6月 | 59 |
| 2026年7月 | 59 |
| 2026年8月 | 59 |
| 2026年9月 | 59 |
| 2026年10月 | 59 |
| 2026年11月 | 59 |
各月最後一次快照。1,000 以上的 Star 數以 100 為單位四捨五入。
同分類的熱門資源
japanese-llm-benchmarkshi3z53一個評估各種LLM的日語能力的基準工具。
EDINET-BenchSakanaAI37[ICLR 2026] 在日本具有挑戰性的金融任務上評估LLMs的表現。
Japanese-RP-BenchAratako25Japanese-RP-Bench是用來測量LLM的日語角色扮演能力的基準。
do-not-answer-jakunishou242023年8月,墨爾本大學公開了安全性評估數據集『Do-Not-Answer』,該數據集已經被自動翻譯成日語,並且考慮了日本文化進行了修正,以便在日語LLM評估中使用。
jmle2026-benchnaoto-iwase112026年2月7日至8日第120屆日本醫學執照考試的LLM基準
medLLM_QA_benchmarkaistairc6醫學LLM的三語(英語、日語、中文)QA基準
研究領域相近的資源
- JMedBenchColdog23331kJMedBench 是一個日本醫學領域 LLM 基準,包含 20 個資料集,涵蓋五個任務(MCQA、NER、STS 等),資料來源於 MedMCQA、PubMedQA、MMLU 及其他,每個資料集都有自己的授權,並附有註記指出翻譯可能存在偏差,需人工審核。HF 資料集共同: 語言模型・語意文本處理
- japanese-gpt-neox-smallrinna656k一個 12 層、768 隱藏層的日本 GPT‑NeoX 模型,訓練於 CC‑100、C4 和 Wikipedia,兼容 Huggingface,並可選擇使用一個玩具前綴調優權重,使每句結尾強制出現笑臉表情符號。HF 模型共同: 語言模型・語意文本處理
- llm-jp-3-150mllm-jp75kLLM‑jp‑3‑150m — 來自日本情報學研究院 LLM 研發中心的 150M 參數日語語言模型,已以 Hugging Face Transformers 格式發佈,需安裝 torch ≥ 2.3.0、transformers ≥ 4.40.1、accelerate ≥ 0.29.3、flash‑attn ≥ 2.5.8,並以日語維基百科、Common Crawl、WARP/PDF、WARP/HTML 以及 Kaken 數據,使用 unigram byte‑fallback tokenizer 進行預訓練。HF 模型共同: 語言模型・語意文本處理
- llm-jp-3-1.8bllm-jp3k一套日本大型語言模型(1.8 b 至 172 b beta1,含 instruct 變體)來自 NII 研究發展中心,以 Hugging Face Transformers 格式打包,並在混合的日文、英文以及網路語料上預訓練,總 token 數量超過 1 trillion,需至少 torch ≥ 2.3、transformers ≥ 4.40、accelerate ≥ 0.29、flash‑attn ≥ 2.5。HF 模型共同: 語言模型・語意文本處理
- japanese-gpt-1brinna2k一個 1.3‑B‑parameter、24‑layer transformer GPT‑1B,在 Japanese C4、CC‑100 以及 Wikipedia 上訓練,於 2022 年 1 月 26 日由 rinna Co. 發布,並以 MIT license 供使用。HF 模型共同: 語言模型・語意文本處理
- deberta-v3-base-japaneseku-nlp13k日文 DeBERTa V3 基礎版本,預訓練於 LLM‑jp v1.0 的 540 B 個 token,使用已調整的 DeBERTa V3 設定,採用 unigram byte‑fallback tokenizer(無形態學分析器),並進行 fine‑tuned 於 JGLUE NLU 任務。HF 模型共同: 語言模型・語意文本處理