
Konoha:日本語トークナイザーのシンプルなラッパー
他の言語の説明
統計
2026年11月17日時点の統計
GitHub の Star 数
266
+1 (10月13日〜)
パッケージの週間ダウンロード数
28,000
パッケージの累計ダウンロード数
7,000,000
最終コミット
2026年11月
GitHub での作成日
2018年8月22日
掲載日
—
ページ作成時から掲載
Star 数の推移
数値を表で見る
| 月 | Star |
|---|---|
| 2025年12月 | 260 |
| 2026年1月 | 261 |
| 2026年2月 | 261 |
| 2026年3月 | 261 |
| 2026年4月 | 261 |
| 2026年5月 | 261 |
| 2026年6月 | 261 |
| 2026年7月 | 263 |
| 2026年8月 | 263 |
| 2026年9月 | — |
| 2026年10月 | 265 |
| 2026年11月 | 266 |
各月の最後のスナップショット。Star 数は 1,000 以上では 100 単位に丸められています。
PyPI での利用
PyPI パッケージ: tiny-tokenizer · 2026年10月までの月間値(ClickPy)
直近1年のダウンロード数
5,302
日本からの割合(直近1年)
0.5%
依存している PyPI パッケージ
1
うち必須の依存 1
PyPI の月間ダウンロード数
数値を表で見る
| 月 | ダウンロード数(月) |
|---|---|
| 2019年1月 | 1,347 |
| 2019年2月 | 416 |
| 2019年3月 | 356 |
| 2019年4月 | 314 |
| 2019年5月 | 501 |
| 2019年6月 | 828 |
| 2019年7月 | 1,355 |
| 2019年8月 | 752 |
| 2019年9月 | 980 |
| 2019年10月 | 6,516 |
| 2019年11月 | 39,275 |
| 2019年12月 | 10,149 |
| 2020年1月 | 7,510 |
| 2020年2月 | 3,912 |
| 2020年3月 | 2,754 |
| 2020年4月 | 2,559 |
| 2020年5月 | 2,315 |
| 2020年6月 | 2,424 |
| 2020年7月 | 2,836 |
| 2020年8月 | 2,832 |
| 2020年9月 | 1,387 |
| 2020年10月 | 1,134 |
| 2020年11月 | 1,209 |
| 2020年12月 | 1,023 |
| 2021年1月 | 1,105 |
| 2021年2月 | 945 |
| 2021年3月 | 1,244 |
| 2021年4月 | 926 |
| 2021年5月 | 888 |
| 2021年6月 | 1,055 |
| 2021年7月 | 988 |
| 2021年8月 | 807 |
| 2021年9月 | 866 |
| 2021年10月 | 973 |
| 2021年11月 | 709 |
| 2021年12月 | 873 |
| 2022年1月 | 981 |
| 2022年2月 | 1,302 |
| 2022年3月 | 1,377 |
| 2022年4月 | 1,046 |
| 2022年5月 | 811 |
| 2022年6月 | 766 |
| 2022年7月 | 617 |
| 2022年8月 | 753 |
| 2022年9月 | 875 |
| 2022年10月 | 685 |
| 2022年11月 | 729 |
| 2022年12月 | 431 |
| 2023年1月 | 453 |
| 2023年2月 | 773 |
| 2023年3月 | 822 |
| 2023年4月 | 490 |
| 2023年5月 | 719 |
| 2023年6月 | 586 |
| 2023年7月 | 689 |
| 2023年8月 | 648 |
| 2023年9月 | 439 |
| 2023年10月 | 414 |
| 2023年11月 | 436 |
| 2023年12月 | 451 |
| 2024年1月 | 454 |
| 2024年2月 | 426 |
| 2024年3月 | 418 |
| 2024年4月 | 496 |
| 2024年5月 | 324 |
| 2024年6月 | 297 |
| 2024年7月 | 351 |
| 2024年8月 | 375 |
| 2024年9月 | 578 |
| 2024年10月 | 884 |
| 2024年11月 | 669 |
| 2024年12月 | 397 |
| 2025年1月 | 612 |
| 2025年2月 | 460 |
| 2025年3月 | 652 |
| 2025年4月 | 663 |
| 2025年5月 | 290 |
| 2025年6月 | 226 |
| 2025年7月 | 248 |
| 2025年8月 | 309 |
| 2025年9月 | 526 |
| 2025年10月 | 312 |
| 2025年11月 | 725 |
| 2025年12月 | 381 |
| 2026年1月 | 370 |
| 2026年2月 | 341 |
| 2026年3月 | 319 |
| 2026年4月 | 455 |
| 2026年5月 | 521 |
| 2026年6月 | 880 |
| 2026年7月 | 225 |
| 2026年8月 | 263 |
| 2026年9月 | 324 |
| 2026年10月 | 498 |
同じカテゴリで人気のリソース
janomemocobeta922純粋なPythonで書かれた日本語形態素解析エンジン
mecab-python3SamuraiT581mecab-pythonです。オリジナルバージョンはこちらから見つけることができます:http://taku910.github.io/mecab/。
fugashipolm538高速でPythonicな日本語トークナイズと形態素解析のためのCython MeCabラッパー。
sudachi.rsWorksApplications492SudachiPy 0.6以上はSudachi.rsとして開発されています。
nagisataishi-i424再帰型ニューラルネットワークに基づく日本語トークナイザー
mecabikegami-yukino274このリポジトリは、Windows 64ビット用のMeCabバイナリのビルドと、MeCab Pythonバインディングの改善に使用されます。
研究分野が近いリソース
kuromoji.jstakuyaa1k日本語形態素解析器のJavaScript実装共通: 統語的テキスト処理・テキスト分割
kagomeikawaha988純粋なGoで書かれた自己完結型の日本語形態素解析器共通: 統語的テキスト処理・テキスト分割
rakutenmarakuten-nlp471日本語と中国語の形態素解析器(単語分割器+品詞タガー)である「楽天MA」は、純粋にJavaScriptで書かれています。共通: 統語的テキスト処理・テキスト分割
vibratodaac-tools430バイブラート:Viterbiベースの高速トークナイザー共通: 統語的テキスト処理・テキスト分割
jumanppku-nlp413Juman++(形態素解析ツールキット)共通: 統語的テキスト処理・テキスト分割
vaporettodaac-tools302Vaporetto:非常に加速されたポイントワイズ予測に基づくトークナイザー共通: 統語的テキスト処理・テキスト分割