自然语言处理---统计语言模型
自然语言怎样理解自然语言?.惯性思维:分析语句,获取语义。-分析语句-回E.g.男篮惨败伊朗
怎样理解自然语言? 惯性思维:分析语句,获取语义。 分析语句 E.g.男篮惨败伊朗
句子句号主语谓语名字短语名词名词动词男篮惨败伊朗
句子 动词 名词 名字短 语 主语 谓语 句号 名词 男篮 惨败 伊朗
规则的劣势好复杂!-好慢!计算机程序语言是上下文无关文法,而自+然语言是上下文有关。根据高德纳(DonaldKnuth)提出的计算复杂度,对于上下文无关文法复杂度是语句长度的二次方,而有关文法为六次方。常识。 The pen is in the box.口Thebox is in the pen口
好复杂! 好慢!计算机程序语言是上下文无关文法,而自 然语言是上下文有关。根据高德纳(Donald Knuth)提出的计算复杂度,对于上下文无关文 法复杂度是语句长度的二次方,而有关文法为六 次方。 常识。The pen is in the box. The box is in the pen
统计语言模型贾单尼克提出了基于统计的语音识别的框架。一个句子是否合理?概率大的比较合理-S-w1w_2....w_n.· P(S)=P(w_1)P(w_2 /w_1)...P(w_n /w_1..W_n-1)
贾里尼克提出了基于统计的语音识别的框架。 一个句子是否合理?概率大的比较合理。 S=w_1w_2.w_n. P(S)=P(w_1)P(w_2|w_1).P(w_n|w_1.w_n-1)