
Transformer 的日語分詞器
其他語言的說明
統計
統計資料截至 2026年11月17日
GitHub Star 數
81
±0 (10月13日〜)
套件每週下載數
427
套件累計下載數
214,000
最後提交
2023年12月
GitHub 建立日期
2021年6月22日
收錄日
—
自頁面建立時收錄
Star 數變化
以表格顯示
| 月份 | Star |
|---|---|
| 2025年12月 | 79 |
| 2026年1月 | 79 |
| 2026年2月 | 79 |
| 2026年3月 | 79 |
| 2026年4月 | 79 |
| 2026年5月 | 79 |
| 2026年6月 | 80 |
| 2026年7月 | 80 |
| 2026年8月 | 81 |
| 2026年9月 | 81 |
| 2026年10月 | 81 |
| 2026年11月 | 81 |
各月最後一次快照。1,000 以上的 Star 數以 100 為單位四捨五入。
在 PyPI 上的使用
PyPI 套件:sudachitra · 至 2026年10月 的每月數值(ClickPy)
近一年下載數
64,553
來自日本的比例(近一年)
14.4%
依賴它的 PyPI 套件
2
其中必要依賴 2
PyPI 每月下載數
以表格顯示
| 月份 | 下載數(月) |
|---|---|
| 2019年1月 | — |
| 2019年2月 | — |
| 2019年3月 | — |
| 2019年4月 | — |
| 2019年5月 | — |
| 2019年6月 | — |
| 2019年7月 | — |
| 2019年8月 | — |
| 2019年9月 | — |
| 2019年10月 | — |
| 2019年11月 | — |
| 2019年12月 | — |
| 2020年1月 | — |
| 2020年2月 | — |
| 2020年3月 | — |
| 2020年4月 | — |
| 2020年5月 | — |
| 2020年6月 | — |
| 2020年7月 | — |
| 2020年8月 | — |
| 2020年9月 | — |
| 2020年10月 | — |
| 2020年11月 | — |
| 2020年12月 | — |
| 2021年1月 | — |
| 2021年2月 | — |
| 2021年3月 | — |
| 2021年4月 | — |
| 2021年5月 | — |
| 2021年6月 | 138 |
| 2021年7月 | 574 |
| 2021年8月 | 988 |
| 2021年9月 | 1,458 |
| 2021年10月 | 1,553 |
| 2021年11月 | 2,254 |
| 2021年12月 | 3,056 |
| 2022年1月 | 2,551 |
| 2022年2月 | 2,647 |
| 2022年3月 | 3,798 |
| 2022年4月 | 2,314 |
| 2022年5月 | 1,934 |
| 2022年6月 | 2,660 |
| 2022年7月 | 2,515 |
| 2022年8月 | 2,549 |
| 2022年9月 | 2,636 |
| 2022年10月 | 8,321 |
| 2022年11月 | 3,049 |
| 2022年12月 | 3,204 |
| 2023年1月 | 2,635 |
| 2023年2月 | 2,729 |
| 2023年3月 | 3,498 |
| 2023年4月 | 3,120 |
| 2023年5月 | 3,013 |
| 2023年6月 | 3,014 |
| 2023年7月 | 3,263 |
| 2023年8月 | 2,997 |
| 2023年9月 | 2,917 |
| 2023年10月 | 2,923 |
| 2023年11月 | 2,565 |
| 2023年12月 | 2,459 |
| 2024年1月 | 2,572 |
| 2024年2月 | 2,614 |
| 2024年3月 | 2,272 |
| 2024年4月 | 2,461 |
| 2024年5月 | 2,326 |
| 2024年6月 | 2,332 |
| 2024年7月 | 2,779 |
| 2024年8月 | 2,205 |
| 2024年9月 | 2,130 |
| 2024年10月 | 3,381 |
| 2024年11月 | 3,022 |
| 2024年12月 | 2,374 |
| 2025年1月 | 3,082 |
| 2025年2月 | 2,076 |
| 2025年3月 | 2,274 |
| 2025年4月 | 5,509 |
| 2025年5月 | 1,926 |
| 2025年6月 | 2,401 |
| 2025年7月 | 2,197 |
| 2025年8月 | 4,349 |
| 2025年9月 | 6,223 |
| 2025年10月 | 3,896 |
| 2025年11月 | 3,391 |
| 2025年12月 | 4,960 |
| 2026年1月 | 2,230 |
| 2026年2月 | 1,526 |
| 2026年3月 | 3,681 |
| 2026年4月 | 10,417 |
| 2026年5月 | 15,231 |
| 2026年6月 | 13,218 |
| 2026年7月 | 3,171 |
| 2026年8月 | 1,801 |
| 2026年9月 | 1,726 |
| 2026年10月 | 3,201 |
同分類的熱門資源
lukestudio-ousia727LUKE -- 基於知識嵌入的語言理解
bert-japanesecl-tohoku551日文文本的BERT模型。
bert-japaneseyoheikikuta497使用SentencePiece的BERT模型進行日文文本處理。
gpt2-japanesetanreinama322日本語GPT2生成モデル
japanese-dialog-transformersnttcslab247NTT有限公司提供的評估日語預訓練模型的代碼。
DistilBERT-base-jpBandaiNamcoResearchInc161一個在維基百科上訓練的日本DistilBERT預訓練模型。
研究領域相近的資源
jptranstokenizerretarfi5Transformers 库的日语分词器共同: 句法文本處理・文本切分
ginza-transformersmegagonlabs16在spacy-transformers中使用自定義分詞器共同: 句法文本處理・文本切分
esuparKoichiYasuoka56使用BERT/RoBERTa/DeBERTa模型的分詞器POS-標記器和依存句法分析器,適用於日語和其他語言。共同: 句法文本處理・文本切分- deberta-v2-large-japanese-char-wwmku-nlp76kJapanese DeBERTa V2 大型模型已在 171 GB 的日語維基百科、CC‑100、與 OSCAR 上訓練,採用字符級 sentencepiece tokenization 與 whole‑word masking,已準備好通過 Hugging Face Transformers 進行下游微調。HF 模型共同: 句法文本處理・文本切分
Mykytea-pythonchezou36KyTea 的 Python 封裝程式共同: 句法文本處理・文本切分
SuPar-UniDicKoichiYasuoka21使用BERT模型的現代和當代日語分詞器、詞性標記器、詞形還原器和依存句法分析器共同: 句法文本處理・文本切分