
在spacy-transformers中使用自定義分詞器
其他語言的說明
統計
統計資料截至 2026年11月17日
GitHub Star 數
16
±0 (10月13日〜)
套件每週下載數
425
套件累計下載數
283,000
最後提交
2026年9月
GitHub 建立日期
2021年6月23日
收錄日
2022年6月15日
Star 數變化
以表格顯示
| 月份 | Star |
|---|---|
| 2025年12月 | 16 |
| 2026年1月 | 16 |
| 2026年2月 | 16 |
| 2026年3月 | 16 |
| 2026年4月 | 16 |
| 2026年5月 | 16 |
| 2026年6月 | 16 |
| 2026年7月 | 16 |
| 2026年8月 | 16 |
| 2026年9月 | 16 |
| 2026年10月 | 16 |
| 2026年11月 | 16 |
各月最後一次快照。1,000 以上的 Star 數以 100 為單位四捨五入。
在 PyPI 上的使用
PyPI 套件:ginza-transformers · 至 2026年10月 的每月數值(ClickPy)
近一年下載數
131,524
來自日本的比例(近一年)
9.3%
依賴它的 PyPI 套件
2
其中必要依賴 2
PyPI 每月下載數
以表格顯示
| 月份 | 下載數(月) |
|---|---|
| 2019年1月 | — |
| 2019年2月 | — |
| 2019年3月 | — |
| 2019年4月 | — |
| 2019年5月 | — |
| 2019年6月 | — |
| 2019年7月 | — |
| 2019年8月 | — |
| 2019年9月 | — |
| 2019年10月 | — |
| 2019年11月 | — |
| 2019年12月 | — |
| 2020年1月 | — |
| 2020年2月 | — |
| 2020年3月 | — |
| 2020年4月 | — |
| 2020年5月 | — |
| 2020年6月 | — |
| 2020年7月 | — |
| 2020年8月 | — |
| 2020年9月 | — |
| 2020年10月 | — |
| 2020年11月 | — |
| 2020年12月 | — |
| 2021年1月 | — |
| 2021年2月 | — |
| 2021年3月 | — |
| 2021年4月 | — |
| 2021年5月 | — |
| 2021年6月 | 271 |
| 2021年7月 | 103 |
| 2021年8月 | 541 |
| 2021年9月 | 1,110 |
| 2021年10月 | 1,384 |
| 2021年11月 | 1,419 |
| 2021年12月 | 2,086 |
| 2022年1月 | 1,920 |
| 2022年2月 | 1,979 |
| 2022年3月 | 3,229 |
| 2022年4月 | 1,939 |
| 2022年5月 | 1,717 |
| 2022年6月 | 2,139 |
| 2022年7月 | 2,076 |
| 2022年8月 | 2,371 |
| 2022年9月 | 2,296 |
| 2022年10月 | 2,225 |
| 2022年11月 | 2,403 |
| 2022年12月 | 2,481 |
| 2023年1月 | 2,115 |
| 2023年2月 | 2,233 |
| 2023年3月 | 2,666 |
| 2023年4月 | 2,252 |
| 2023年5月 | 2,198 |
| 2023年6月 | 2,338 |
| 2023年7月 | 2,401 |
| 2023年8月 | 2,220 |
| 2023年9月 | 2,288 |
| 2023年10月 | 2,368 |
| 2023年11月 | 2,240 |
| 2023年12月 | 2,028 |
| 2024年1月 | 1,989 |
| 2024年2月 | 2,444 |
| 2024年3月 | 2,569 |
| 2024年4月 | 2,830 |
| 2024年5月 | 2,862 |
| 2024年6月 | 2,767 |
| 2024年7月 | 3,130 |
| 2024年8月 | 2,722 |
| 2024年9月 | 2,895 |
| 2024年10月 | 4,826 |
| 2024年11月 | 4,004 |
| 2024年12月 | 3,604 |
| 2025年1月 | 4,316 |
| 2025年2月 | 2,485 |
| 2025年3月 | 2,629 |
| 2025年4月 | 8,811 |
| 2025年5月 | 2,687 |
| 2025年6月 | 3,448 |
| 2025年7月 | 2,698 |
| 2025年8月 | 6,976 |
| 2025年9月 | 11,345 |
| 2025年10月 | 7,238 |
| 2025年11月 | 6,005 |
| 2025年12月 | 9,877 |
| 2026年1月 | 5,597 |
| 2026年2月 | 3,859 |
| 2026年3月 | 10,138 |
| 2026年4月 | 21,153 |
| 2026年5月 | 32,109 |
| 2026年6月 | 28,893 |
| 2026年7月 | 6,288 |
| 2026年8月 | 2,596 |
| 2026年9月 | 1,788 |
| 2026年10月 | 3,221 |
同分類的熱門資源
研究領域相近的資源
SudachiTraWorksApplications81Transformer 的日語分詞器共同: 句法文本處理・文本切分- deberta-v2-large-japanese-char-wwmku-nlp76kJapanese DeBERTa V2 大型模型已在 171 GB 的日語維基百科、CC‑100、與 OSCAR 上訓練,採用字符級 sentencepiece tokenization 與 whole‑word masking,已準備好通過 Hugging Face Transformers 進行下游微調。HF 模型共同: 句法文本處理・文本切分
- japanese-roberta-baserinna9kJapanese‑Roberta‑Base 是由 rinna Co., Ltd. 推出的預訓練遮罩語言模型,含正確載入、token 預處理、position‑id 處理的指引,以及強調需放置於首位的 [CLS] token 和一致 tokenization 的使用範例。HF 模型共同: 句法文本處理・文本切分
esuparKoichiYasuoka56使用BERT/RoBERTa/DeBERTa模型的分詞器POS-標記器和依存句法分析器,適用於日語和其他語言。共同: 句法文本處理・文本切分
SuPar-UniDicKoichiYasuoka21使用BERT模型的現代和當代日語分詞器、詞性標記器、詞形還原器和依存句法分析器共同: 句法文本處理・文本切分- bert-base-japanese-whole-word-maskingtohoku-nlp462kJapanese BERT‑base 預訓練於 2019 年日本維基百科,使用 IPA 字典與整詞掩碼,12 層、768 維,32,000 詞表,512 令牌序列,1 百萬步;可於 cl‑tohoku/bert‑japanese 在 CC‑BY‑SA 條款下取得。HF 模型共同: 句法文本處理・文本切分