一款由 ABEJA Inc. 使用日语 CC‑100 和 OSCAR 训练的 2.7B 参数日语 GPT‑NeoX 模型,可通过 Hugging Face Transformers 管道或 PyTorch 使用,按 MIT 许可证发布。
其他语言的说明
统计
统计数据截至 2026年11月16日
Hugging Face 下载数(近 30 天)
3,000
Hugging Face 点赞数
59
收录日
—
自页面创建时收录
下载数(近 30 天)变化
以表格显示
| 月份 | 下载(30天) |
|---|---|
| 2025年12月 | 5,000 |
| 2026年1月 | 12,000 |
| 2026年2月 | 91,000 |
| 2026年3月 | 122,000 |
| 2026年4月 | 83,000 |
| 2026年5月 | 94,000 |
| 2026年6月 | 116,000 |
| 2026年7月 | 76,000 |
| 2026年8月 | 78,000 |
| 2026年9月 | 80,000 |
| 2026年10月 | 6,000 |
| 2026年11月 | 3,000 |
各月最后一次快照时的近 30 天下载数。
同分类的热门资源
- japanese-gpt-neox-smallrinna656k一个 12 层、768 隐藏层的日语 GPT‑NeoX 模型,训练数据为 CC‑100、C4 以及 Wikipedia,兼容 Huggingface,并配备可选的玩具前缀调优权重,能强制每个句子末尾以笑脸表情符号结束。
- Spark-X2.5-4B-Heretic-jp-ggufsoyaakinohara589k日语适配版 Spark‑X2.5‑4B 模型(Heretic JP),具备拒绝衰减、预训练、指令调优和工具调用修复功能,可在 BF16 至 Q4_K_M 的 GGUF 量化版本中使用,约 2.5 GiB,支持 llama.cpp 的 1,048,576‑token 上下文。
- llm-jp-4-33b-thinking-ggufllm-jp271kLLM‑jp‑4‑33b‑thinking‑gguf 是日本国立信息学研究所的 33 B 日语语言模型,已使用 SFT 和 DPO(无 RL)预训练,可通过 LLM‑jp fork 在 llama.cpp 上使用,并在其 cookbook 中提供详细使用说明。
- llm-jp-4.1-8b-thinkingllm-jp80kLLM‑jp‑4.1‑8b‑thinking 是日本国立信息学研究所(NII)LLM 研发中心的一个 33 B Transformer 语言模型,采用中途预训练方式,并通过 SFT/DPO 对齐(无 RL),旨在用于日语 NLP 任务,并已在菜谱和技术博客中进行记录。
- llm-jp-3-150mllm-jp75kLLM‑jp‑3‑150m——来自国立信息学研究所LLM研发中心的150 M参数日语语言模型——以 Hugging Face Transformers 格式发布,需要 torch ≥ 2.3.0、transformers ≥ 4.40.1、accelerate ≥ 0.29.3、flash‑attn ≥ 2.5.8,并且在日本维基百科、Common Crawl、WARP/PDF、WARP/HTML 和 Kaken 数据上使用 unigram byte‑fallback tokenizer 进行预训练。
- llm-jp-4-8b-instructllm-jp49kllm‑jp‑4‑8b‑instruct 是 NII 的 LLM‑jp‑4 系列 4.1 B 参数的日语 LLM,先在大型语料库上预训练,随后仅使用监督指令数据进行微调(不使用 DPO/REINFORCE),并附带类似食谱的使用指南和 byte‑fallback unigram tokenizer。
研究领域相近的资源
text-generationdiscus043419易于使用的脚本,可通过您自己的文本对GPT-2-JA进行微调,生成句子并自动发布推文。GitHub共同: 文本生成・语言模型- gpt2-large-japaneseabeja2k由 ABEJA, Inc. 在 Japanese CC‑100、Wikipedia 与 OSCAR 上训练的大型日语 GPT‑2 模型,使用 sentencepiece 进行分词,可通过 Hugging Face transformers 在 PyTorch 或 TensorFlow 上使用,依据 MIT license。共同: 文本生成・语言模型
mbart-finetuningken113用于微调mBART模型的代码。GitHub共同: 文本生成・语言模型
gptuber-by-langchainkarakuri-ai63GPT将成为YouTuber。GitHub共同: 文本生成・语言模型
gpt2-japanesetanreinama322日本GPT2生成模型GitHub共同: 文本生成・语言模型- llm-jp-4-8b-basellm-jp11k一个存储库,托管来自国立信息研究所LLM研发中心的8.6 B参数llm‑jp‑4‑8b‑base transformer,采用预训练和中间训练,随后进行监督微调和直接偏好优化(不使用强化学习),并提供PyTorch‑transformers使用指南。共同: 文本生成・语言模型