《自然语言处理》学习笔记

自然语言处理 ( 英语 : Natural Language Processing，缩写作 NLP ) 是人工智能和语言学领域的分支学科。此领域探讨如何处理及运用自然语言；自然语言处理包括多方面和步骤，基本有认知、理解、生成等部分。 自然语言认知和理解是让计算机把输入的语言变成有意思的符号和关系，然 ...
2019-06-06 理论

《中文自然语言处理导论》学习笔记

C01. Introduction1.1 中文自然语言处理是什么一门语言就是一个动态集合，其中包括符号及其对应的视觉、听觉、触觉或者文字交流的规则。 人类的语言被称为自然语言，其科学研究属于语言学范畴，其计算方式的实现属于计算语言学领域。 计算语言学侧重于人类语言的理论方面 自然语言处理则是语言理 ...
2019-06-06 自然语言处理

《中文自然语言处理导论》学习笔记

C02. 中文的词本章主要关注中文文本的形态处理，包括与之相关的语言单元的素和词。 2.1 引言基本问题 中文里的词是怎样表示的？ 中文里的词是怎样构成的？ 中文里的词是怎样识别的？ 中文构词法多以形态合成法为主，并且辅以相对较少的词缀；同时，中文构词还采用了叠词形式 2.2 字、语素和词2.2 ...
2019-06-06 自然语言处理

《中文自然语言处理导论》学习笔记

Introduction to Chinese Natural Language Processing《中文自然语言处理导论》学习笔记 ...
2019-06-06 自然语言处理

《自然语言处理综论》学习笔记

Ch01 导论会话代理（conversational agents）或者 对话系统（dialogue systems）是能够使用自然语言与人类会话的程序。其组成部分为： 语言输入 自动语音识别（automatic speech recognition） 自然语言理解（natural langu ...
2019-06-06 自然语言处理

《自然语言处理综论》学习笔记

Ch02 正则表达式 与 自动机正则表达式（regular expression, RE）：描述文本序列的标准记录方式。在文本检索和信息抽取的各种类型的应用中，都使用正则表达式来描述文本中的符号串。 有限状态自动机（finite state automaton）：不仅是一种用来实现正则表达式的数学工 ...
2019-06-06 自然语言处理

《自然语言处理综论》学习笔记

Ch03 词 与 转录机正词法规则（orthographic rules） 形态规则（morphological rules） 形态剖析（morphological parsing）：把单词剖析为多个词素 剖析产生的结果可以是形态结构、句法结构、语义结构或者话语结构 剖析产生的形式可以是符号串、树或 ...
2019-06-06 自然语言处理

《自然语言处理综论》学习笔记

Ch04 N 元语法N 元语法模型（N-gram model）是概率模型。 2 元语法（bigram）是包含 2 个单词的序列； 3 元语法（trigram）是包含 3 个单词的序列； 语言模型（Language Models，LM）是单词序列的概率模型。 语料库中单词数目的计算自然语言中统计计算需 ...
2019-06-06 自然语言处理

《自然语言处理综论》学习笔记

Ch05 词类标注词类（Part-of-Speech，POS），又称为单词类别（word classes）、形态类别（morphological classes）或者词汇标记（lexical tags）。 词类标注（part-of-speech tagging）：把词类指派给单词。 词类标注的常用方 ...
2019-06-06 自然语言处理

《自然语言处理综论》学习笔记

Ch06 HMM 与 MEMM马尔可夫链隐马尔可夫模型（HMM）似然度的计算：向前算法解码：Viterbi 算法HMM 的训练：向前——向后算法最大熵模型的背景知识线性回归逻辑回归逻辑回归（分类）逻辑回归（训练）最大熵模型（MEMM）6.9 小结 ...
2019-06-06 自然语言处理
1234