浅谈NLP-语法树和语言模型
在自然语言中，我们的目标是对句子理解，对句子生成。但是由于计算机对电脑理解有一些障碍：模糊、不确定、不完整等。 我们在这里简单介绍语法树Syntax Tree和语言模型。语法指的是一些规则、原理、过程决定着自然语言句子的结构。
N-gram模型是一种典型的统计语言模型（Language Model，LM），统计语言模型是一个基于概率的判别模型.统计语言模型把语言（词的序列）看作一个随机事件，并赋予相应的概率来描述其属于某种语言集合的可能性。
Transformer是近两三年非常火的一种适用于NLP领域的一种模型，本质上是Encoder-Decoder结构，所以多应用在机器翻译（输入一个句子输出一个句子）、语音识别（输入语音输出文字）、问答系统等领域。
引入先验知识，如语义信息和语法信息。通过在神经网络结构中共享更多的结构与参数，可以捕获长期的上下文信息， 5，如何解释神经网络得到的词向量 6，上述模型对每个单词分配一个在语义空间的点，所以无法解决一词多义问题。如何扩展当前模型，在语义空间中为词分配多个点来代表词的不同语义。
NLP到底是个什么鬼?
简言之，NLP就是从破解成功人士的语言及思维模式入手，独创性地将他们的思维模式进行解码后，发现了人类思想、情绪和行为背后的规律，并将其归结为一套可复制可模仿的程式。美国科罗拉多政府曾给出了一个贴切的定义：NLP是关于人类行为和沟通程序的一套详细可行的模式。
NLP 就是人类和机器之间沟通的桥梁！为什么是“自然语言”处理？自然语言就是大家平时在生活中常用的表达方式，大家平时说的「讲人话」就是这个意思。
自然语言处理是计算机科学领域与人工智能领域中的一个重要方向。它研究能实现人与计算机之间用自然语言进行有效通信的各种理论和方法。自然语言处理是一门融语言学、计算机科学、数学于一体的科学。它并不是一般地研究自然语言，而在于研制能有效地实现自然语言的通信的计算机系统，特别是其中的软件系统。
所以，将NeuroLinguistic Programming（简称NLP）翻译成神经语言学容易引起误会。将NLP翻译成神经--语言程式多是台湾、香港地区的译法，中国大陆的人习惯说\程序\，而少用\程式\，所以，我们认为，将NLP翻译为神经--语言程序妥当一些。神经--语言程序的概念理由理查德班德勒和约翰格林德在20世纪70年代早期提出。
NLP的基本精神：十二条前提假设 ——NLP的基本精神，NLPer思考和解决问题的出发点，也就是NLPer的人生观。没有两个人是一样的 No two persons are the same.没有两个人的人生经验会完全一样，所以没有两个人的信念、价值观和规条系统会是一样。
NLP是对人类主观经验的研究，NLP的起源是研究卓越人士特别成功的原因，把结果化成一套一套的技巧程序，使其它人也可以成为卓越人士。NLP研究出“大脑如何运用”这方面的很多知识，继而发展了种种技巧，配合大脑运用的模式去选择思想、语言和行为，帮助一个人本身的提升，以及对他身边的人作出更正面的影响。
自然语言处理(NLP)知识整理及概述(一)
1、这是我在留学期间选修的课程 ：natura language process。 这篇文章主要是为了大致的梳理这门课上的知识点，方便日后复习。因此，语言处理的主体对象是English。简单来说，语言模型就是一个对于不同单词出现概率的统计。 然而，对于英语来说，每个单词可能有不同的时态和单复数等形态变化。
2、Glove 是属于统计语言模型，通过统计学知识来训练词向量 ELMO 通过使用多层双向的LSTM（一般都是使用两层）来训练语言模型，任务是利用上下文来预测当前词，上文信息通过正向的LSTM获得，下文信息通过反向的LSTM获得，这种双向是一种弱双向性，因此获得的不是真正的上下文信息。
3、NLP是对人类主观经验的研究，NLP的起源是研究卓越人士特别成功的原因，把结果化成一套一套的技巧程序，使其它人也可以成为卓越人士。自然语言处理（英语：naturallanguageprocessing，缩写作NLP）是人工智能和语言学领域的分支学科。此领域探讨如何处理及运用自然语言；自然语言认知则是指让电脑“懂”人类的语言。
4、NLP，中文叫自然语言处理，简单来说，是一门让计算机理解、分析以及生成自然语言的学科，大概的研究过程是：研制出可以表示语言能力的模型——提出各种方法来不断提高语言模型的能力——根据语言模型来设计各种应用系统——不断地完善语言模型。
标签： nlp语言魔方感受
