タスクから探す
自然言語処理の139のタスクから、日本語のライブラリ・モデル・データセットを探せます。
139件のタスク
テキスト正規化・前処理
- 言語識別Language Identification11
- 文分割(文境界の判定)Sentence Boundary Detection12
- トークン化Tokenization30
- サブワード分割Subword Tokenization7
- 字句正規化Lexical Normalization24
- 翻字Transliteration27
- 読み上げ用テキスト正規化Text Normalization for Speech (TN / ITN)3
- Web本文抽出(ボイラープレート除去)Boilerplate Removal / Main Content Extraction1
- コーパスの品質フィルタリングCorpus Quality Filtering2
- 重複除去Deduplication / Near-duplicate Detection1
形態論・単語分割
統語解析
語彙意味論
文の意味・推論
- 自然言語推論(含意関係認識)Natural Language Inference (NLI) / Recognizing Textual Entailment9
- 意味的類似度Semantic Textual Similarity (STS)13
- 言い換えの認識Paraphrase Identification8
- 意味解析(形式的な意味表現への変換)Semantic Parsing1
- 意味役割付与Semantic Role Labeling (SRL)2
- 述語項構造解析Predicate-Argument Structure Analysis2
- 事実性の判定Event Factuality Prediction1
談話・文脈・語用論
言語モデル・表現学習・解釈性
情報抽出
- 固有表現認識(固有表現抽出)Named Entity Recognition (NER)34
- エンティティリンキングEntity Linking4
- 関係抽出Relation Extraction2
- イベント抽出Event Extraction1
- 時間表現の認識・正規化Temporal Expression Recognition & Normalization (Temporal Tagging)6
- キーフレーズの抽出・生成Keyphrase Extraction & Generation2
- 専門用語の抽出Automatic Term Extraction (Terminology Extraction)6
- 略語の検出・展開Acronym Identification & Disambiguation1
- 地名の解決(ジオパーシング)Toponym Resolution / Geoparsing8
テキスト分類
感情・意見・文体の分析
有害表現・偽情報・プライバシー
情報検索・テキストマイニング
質問応答
要約
機械翻訳・多言語処理
テキスト生成・書き換え
対話
推論・常識
文章作成支援・言語教育
音声言語処理
- 音声認識Automatic Speech Recognition (ASR)85
- 音声合成Text-to-Speech (TTS)61
- 書記素から音素への変換Grapheme-to-Phoneme Conversion (G2P)10
- アクセント・韻律の推定Accent / Prosody Prediction13
- 音声翻訳Speech Translation (ST)2
- キーワード検出(ウェイクワード検出)Keyword Spotting / Wake-word Detection1
- 話者ダイアライゼーションSpeaker Diarization3
- 話されている言語の識別Spoken Language Identification1
- 非流暢性の検出Disfluency Detection2
- ターンテイキング・相槌の予測(音声対話)Turn-taking / Backchannel Prediction (Spoken Dialogue Systems)2
マルチモーダル・実世界との接地
- 画像のキャプション生成Image Captioning11
- 視覚的質問応答(VQA)Visual Question Answering13
- 画像とテキストの相互検索Image–Text Retrieval5
- 文書画像の理解・文書VQADocument Understanding / Document Visual Question Answering1
- 帳票からの情報抽出Key Information Extraction (KIE)1
- 文書のレイアウト解析Document Layout Analysis6
- 表の構造の認識Table Structure Recognition2
- 文字の認識(OCR・手書き文字の認識)Optical Character Recognition (OCR) / Scene Text & Handwriting Recognition46
- 数式画像の認識Mathematical Expression Recognition (Image-to-LaTeX)1
- テキストからの画像生成Text-to-Image Generation1
- テキストからの音響・音楽の生成Text-to-Audio / Text-to-Music Generation1
コード・構造化データ
大規模言語モデルの評価・安全性・エージェント
- 指示への追従Instruction Following14
- 知識・能力の総合評価Massive Multitask Knowledge Evaluation40
- 長い文脈の理解Long-context Understanding1
- ツールの使用・関数呼び出しTool Use / Function Calling1
- LLMエージェント(自律的なタスクの遂行)LLM Agents2
- 真実性・事実性の評価Truthfulness / Factuality Evaluation1
- 安全性の評価(有害な要求への対応)Safety Evaluation / Harmful Request Refusal2
- ジェイルブレイク・プロンプトインジェクションへの対策Jailbreak / Prompt Injection Detection & Defense2
- 報酬モデル・選好の予測Reward Modeling / Preference Prediction5
専門分野の言語処理
- 生物医学の固有表現認識Biomedical Named Entity Recognition1
- 医療用語の正規化(概念へのリンキング)Biomedical Concept Normalization1
- 医療コーディングClinical Coding (ICD Coding)1
- 医療の質問応答Medical Question Answering3
- メンタルヘルスの状態の検出Mental Health Condition Detection1
- 法令・判例の検索と法的な含意関係Legal Case / Statute Retrieval & Legal Entailment1
- 法的な推論・法律のQALegal Reasoning / Legal QA13
- 金融分野の総合評価(資格試験・財務諸表の分析)Financial Domain Benchmarks for LLMs3
- 金融文書からの情報抽出・検証Financial Document Information Extraction & Verification2