すべてのフェーズ
フェーズ 05
NLP 基礎から応用まで
言語こそが知性へのインターフェース。すべての層を習得する。
29 レッスン
このフェーズのレッスン
- 1テキスト処理 — トークナイゼーション・ステミング・レンマタイゼーション
- 2Bag of Words、TF-IDF、テキスト表現
- 3単語埋め込み — Word2Vec をスクラッチから実装
- 4GloVe、FastText、サブワード埋め込み
- 5感情分析
- 6固有表現認識（NER）
- 7品詞タグ付けと構文解析
- 8テキスト向け CNN と RNN
- 9Sequence-to-Sequence モデル
- 10Attention メカニズム — 革新的突破
- 11機械翻訳
- 12テキスト要約
- 13質問応答システム
- 14情報検索と検索エンジン
- 15トピックモデリング — LDA と BERTopic
- 16Transformer 以前のテキスト生成 — N-gram 言語モデル
- 17チャットボット — ルールベースからニューラル、LLM エージェントまで
- 18多言語 NLP
- 19サブワードトークナイゼーション — BPE・WordPiece・Unigram・SentencePiece
- 20構造化出力と制約付きデコーディング
- 21自然言語推論 — テキスト含意
- 22埋め込みモデル徹底解説 — 2026年版
- 23RAG のためのチャンキング戦略
- 24共参照解析
- 25エンティティリンキングと曖昧性解消
- 26関係抽出とナレッジグラフ構築
- 27LLM 評価フレームワーク — RAGAS・DeepEval・G-Eval
- 28長文コンテキスト評価 — NIAH・RULER・LongBench・MRCR
- 29対話状態トラッキング