
這是一個整理了在LLM勉強會(LLM-jp)中開發的與LLM用戶端相關的分詞器的存儲庫。
其他語言的說明
統計
統計資料截至 2026年11月17日
GitHub Star 數
54
+1 (10月13日〜)
最後提交
2026年9月
GitHub 建立日期
2023年7月13日
收錄日
2023年10月23日
Star 數變化
以表格顯示
| 月份 | Star |
|---|---|
| 2025年12月 | 44 |
| 2026年1月 | 44 |
| 2026年2月 | 45 |
| 2026年3月 | 46 |
| 2026年4月 | 47 |
| 2026年5月 | 47 |
| 2026年6月 | 48 |
| 2026年7月 | 48 |
| 2026年8月 | 49 |
| 2026年9月 | 50 |
| 2026年10月 | 53 |
| 2026年11月 | 54 |
各月最後一次快照。1,000 以上的 Star 數以 100 為單位四捨五入。
同分類的熱門資源
japanese-llm-rankingyuzu-ai50這個儲存庫支援YuzuAI的Rakuda排行榜,該排行榜是日本語言模型的日本專用版本,類似於LMSYS的Vicuna評估。
llm-jp-evalllm-jp175這個工具可以跨多個數據集對日語大規模語言模型進行自動評估。
llm-lora-classificationhppRC97llm-lora-classification
llm-jp-sftllm-jp66此存儲庫包含了LLM-jp模型的監督微調代碼。
Japanese-BPEEncodertanreinama42日本語-BPE編碼器
japanese-llm-roleplay-benchmarkoshizo42這個存儲庫是為了評估日本語LLM的角色扮演性能而創建的。
研究領域相近的資源
yomichanFooSoft1.1kChrome和Firefox的日語彈出詞典擴展。共同: 多語言・標註與資料集建置
jmdict-yomitanyomidevs332Yomitan/Yomichan的JMdict、JMnedict和KANJIDIC。共同: 多語言・標註與資料集建置
jamdictneocl172Python 3 庫,用於操作Jim Breen的JMdict、KanjiDic2、JMnedict和漢字-部首映射。共同: 多語言・標註與資料集建置
elmo-japanesecl-tohoku4艾摩日文共同: 多語言・詞彙、辭典與輸入法
aoveceggplants3簡易青空文庫Word2Vec建構器 - 青空文庫全書籍的Word2Vec建構器+已建構模型共同: 標註與資料集建置・詞彙、辭典與輸入法
japagenretrieva1使用LLM在日語任務中生成虛擬學習數據的研究共同: 標註與資料集建置・詞彙、辭典與輸入法