大型の日本語 GPT‑2 モデルは、ABEJA, Inc. が Japanese CC‑100、Wikipedia、OSCAR でトレーニングし、sentencepiece でトークナイズされ、MIT ライセンスの下で PyTorch または TensorFlow で Hugging Face transformers を通じて利用できます。
他の言語の説明
統計
2026年11月16日時点の統計
Hugging Face のダウンロード数(直近30日)
2,000
Hugging Face の Like 数
18
掲載日
—
ページ作成時から掲載
ダウンロード数(直近30日)の推移
数値を表で見る
| 月 | DL(30日) |
|---|---|
| 2025年12月 | — |
| 2026年1月 | — |
| 2026年2月 | — |
| 2026年3月 | — |
| 2026年4月 | 4,000 |
| 2026年5月 | 2,000 |
| 2026年6月 | 1,000 |
| 2026年7月 | 1,000 |
| 2026年8月 | — |
| 2026年9月 | 1,000 |
| 2026年10月 | 1,000 |
| 2026年11月 | 2,000 |
各月の最後のスナップショットにおける、直近30日間のダウンロード数です。
同じカテゴリで人気のリソース
- japanese-gpt-neox-smallrinna656kCC‑100、C4、Wikipedia で学習された12‑layer、768‑hidden の日本語 GPT‑NeoX モデル。Huggingface と互換性があり、各文の末尾に必ず笑顔の絵文字を付けるオプションのトイプレフィックス調整ウェイトが付属しています。
- Spark-X2.5-4B-Heretic-jp-ggufsoyaakinohara589kHeretic JPに適応されたSpark‑X2.5‑4Bモデル(Japanese‑adapted Spark‑X2.5‑4B model)で、拒否抑制、事前学習、指示調整およびツール呼び出し修復が組み込まれており、BF16からQ4_K_MまでのGGUF量子化版(約2.5 GiB)が利用可能です。1,048,576トークンコンテキストでllama.cppを介して使用できます。
- llm-jp-4-33b-thinking-ggufllm-jp271kLLM‑jp‑4‑33b‑thinking‑ggufは、国立情報学研究所から提供される33 Bの日本語言語モデルで、SFTとDPO(RLなし)で事前訓練されています。llama.cppではLLM‑jpフォーク経由で利用可能で、詳細な使用方法がクックブックに記載されています。
- llm-jp-4.1-8b-thinkingllm-jp80kLLM‑jp‑4.1‑8b‑thinking は、NII の LLM R&D Center が開発した 33 B トランスフォーマー言語モデルで、途中でのみ事前学習され、SFT/DPO(RL を使用しない)によって調整されています。日本語 NLP タスク向けに設計され、クックブックと技術ブログで文書化されています。
- llm-jp-3-150mllm-jp75k「LLM‑jp‑3‑150m」は、情報学研究所のLLM R&D Centerが開発した150Mパラメータを有する日本語言語モデルです。Hugging Face Transformers形式で配布され、torch ≥ 2.3.0、transformers ≥ 4.40.1、accelerate ≥ 0.29.3、flash‑attn ≥ 2.5.8 が必要です。Japanese Wikipedia、Common Crawl、WARP/PDF、WARP/HTML、Kaken データを使用し、unigram byte‑fallback tokenizer で事前学習されています。
- llm-jp-4-8b-instructllm-jp49kllm‑jp‑4‑8b‑instructは、NIIのLLM‑jp‑4シリーズからの4.1 Bパラメータを持つ日本語LLMで、大規模コーパスで事前学習され、次に教師付き指示データのみでファインチューニングされ(DPO/REINFORCEは使用していない)、料理本スタイルの使用ガイドとbyte‑fallbackユニグラムトークナイザーが付属します。
研究分野が近いリソース
- gpt-neox-japanese-2.7babeja3k2.7Bパラメータの日本語 GPT‑NeoX モデルは、ABEJA Inc. が日本語 CC‑100 と OSCAR で学習し、Hugging Face Transformers パイプラインまたは PyTorch で利用可能で、MIT license の下で公開されています。共通: テキスト生成・言語モデル
text-generationdiscus043419あなた自身のテキストでGPT-2-JAを微調整し、文章を生成し、自動的にツイートするための使いやすいスクリプト。GitHub共通: テキスト生成・言語モデル
mbart-finetuningken113mBARTモデルのファインチューニングを実行するためのコード。GitHub共通: テキスト生成・言語モデル
gptuber-by-langchainkarakuri-ai63GPTがYouTuberをやりますGitHub共通: テキスト生成・言語モデル
gpt2-japanesetanreinama322日本語GPT2生成モデルGitHub共通: テキスト生成・言語モデル- llm-jp-4-8b-basellm-jp11k8.6 Bパラメータの llm-jp-4-8b-base トランスフォーマーをホストするリポジトリ。共通: テキスト生成・言語モデル