跳到正文

自然语言处理

从Unicode、分词、语言模型和结构分析走到Transformer、大模型、检索问答、生成任务与可信生产

9898 小时14高级
开始学习

1第1章 语言、文本与数据基础

从语言层级、Unicode、语料、分词、规范化、长尾和评价建立证据链。

7

2第2章 词法、形态与子词算法

掌握正则、有限状态机、形态学、中文分词、BPE、Unigram与WFST。

7

3第3章 统计语言模型

从链式法则和n-gram走到平滑、回退、Kneser–Ney、困惑度与解码。

7

4第4章 分布语义与词表示

用共现、PMI、矩阵分解、Word2Vec、子词和上下文化表示学习语义。

7

5第5章 序列标注与结构化预测

贯通HMM、Viterbi、CRF、词性、命名实体、BIO和弱监督评价。

7

6第6章 句法分析

从CFG、CKY和PCFG走到依存、转移系统、歧义与树库评价。

7

7第7章 语义、篇章与语用

覆盖逻辑形式、词义、语义角色、指代、篇章、语用和自然语言推理。

7

8第8章 文本分类与信息抽取

用朴素贝叶斯、逻辑回归、TF-IDF、主题、关系、事件与校准建立基线。

7

9第9章 序列到序列、注意力与Transformer

推导编码器—解码器、注意力、Transformer、位置、掩码、解码和评价。

7

10第10章 预训练语言模型与大模型

学习预训练目标、Tokenizer、数据、微调、提示、对齐和推理效率。

7

11第11章 检索、问答与RAG

贯通稀疏/稠密检索、重排、抽取/生成问答、RAG和端到端归因。

7

12第12章 翻译、摘要、对话与多语言生成

覆盖机器翻译、摘要事实性、对话状态、可控生成和低资源迁移。

7

13第13章 可信NLP、安全与生产系统

建立事实核验、公平、隐私、提示注入防护、可靠评测、服务与监控。

7

14第14章 端到端自然语言处理综合项目

交付任务、语料、模型、结构/检索证据、鲁棒、安全、部署与答辩。

7
自然语言处理 · op599 课程