人工智能的研究内容：自然语言处理与智能信息检索技术
自然语言处理是人工智能技术应用于实际领域的典型范例。
如果一个计算机系统能够像人一样，理解上下文信息，并根据已知信息进行推理，那么，它就已经具备了理解自然语言信息的能力。
许多年来，有很多学者投入这一领域的研究，也收到了很大成效。
目前，自然语言处理主要研究的是：计算机系统如何根据已知的主题和对话情景，在结合大量的常识——世界知识和期望作用的基础上，生成和理解自然语言。
实现这个功能所需要的编码和解码过程极其复杂，如果能够在这个问题上取得突破性的进展，那么人工智能将进一步走进人们的生活中。
当今计算机科学与技术研究的焦点问题是信息获取技术，如何将人工智能技术与智能信息检索技术进行很好的融合，是人工智能走向广泛实际应用的契机与突破口。
目前，智能信息检索系统还有以下3个缺陷。第一，难以建立一个能够理解用自然语言表达的询问系统。
第二，假设成功预设机器能够理解的形式化询问来规避语言理解问题，如何依据存储的事实给出答案的问题成为我们面临的第二个难题。
第三，需要理解的问题和给出的答案都可能超出该学科领域建立的数据库所涵盖的知识。
科技的发展，短时间内自然科学知识的激增，智能检索系统的研究与优化为今后科技的持续快速发展保驾护航。
好啦，这次的分享就到这里，我们下期再见！欢迎在评论区补充和留言。
人工智能的研究内容之专家系统与自然语言
人工智能理论在不断深入研究中得到了发展，向着更为宽广的应用领域迈进，也获得了更重要的应用结果。从应用的角度看，人工智能的研究主要集中在以下几个方面。
1.专家系统
专家系统具有丰富的专业知识和经验。基于人工智能技术，通过一个或多个人类专家在某一个领域提供的知识和经验用于推理和判断，并采用类似于人类专家的决策过程，以解决那些需要专家决定的复杂问题。
专家系统通常需要利用已知的现有算法来解决问题，但有些问题无法解决，因为给出的信息通常是不完全、不精确，甚至是不确定的。
它可以解决一些问题，如一般性的解释、预测、诊断、设计、规划、监测、修复、指导和控制。从架构上看，专家系统可分为集中专家系统、分布式专家系统、协同专家系统、神经网络专家系统等，从实现方法上可以分为基于规则的专家系统、基于模型的专家系统、基于框架的专家系统等。
2.自然语言
理解自然语言理解就是研究如何在人与计算机之间利用自然语言建立起有效的通信。由于目前计算机系统与人类之间的交互还只能使用严格限制的各种非自然语言，因此，解决计算机系统能够理解自然语言的问题一直是人工智能领域的重要研究课题之一。
实现人与计算机之间的自然语言沟通，是指计算机系统可以理解自然语言文本及自然语言文本的含义，还能够理解人类想要表达的特定意图和想法。
如何正确理解并准确表达语言是一个极其复杂的解码和编码过程。能够做到理解口语和书面语言的计算机系统不但需要有一些代表语境知识的结构，还需要积累一些基于这些知识的推理技巧。
虽然在理解有限范围的自然语言对话和理解用自然语言表达的小段文章或故事方面的程序系统已有一定的进展，但要实现功能较强的理解系统仍十分困难。
从目前的理论和技术现状看，自然语言理解系统主要应用于机器翻译、自动文摘、全文检索等方面，而通用的和高质量的自然语言处理系统，仍然是较长期的努力目标。
好啦，这次的分享就到这里，我们下期再见！欢迎在评论区补充和留言。
人工智能的起点：自然语言理解概念浅析
0分享至近来，人工智能（AI）行业利好消息不断，各大巨头都在积极拼抢这个领域的人才，笔者最近也频繁收到相关方面的咨询和讨论，不得不说，有时候大家真的搞错。人工智能是个非常大的概念，囊括了几乎所有学科，并非单纯计算机、通信、声学、光学等领域，也并非热炒的机器学习(例如深度学习和强化学习)就能实现的。然而，基于大数据和机器学习的狭义人工智能，确实已经给人类生活带来了巨大的变化，比如搜索、电商、广告、社交、语音等等。一直以来，人们似乎都把语音识别看的极其重要，并认为语音识别就是最接近人工智能的领域。实际上这是一个误区，语音和按键、触摸、手势等方法一样，只是人类交互的一种手段。也有很多人认为语音帮助人类产生了智慧，然而，这一观点并没有有力的证据支撑。目前，这方面的基础研究还没有实质性的进展，我们对人体精密构造的认知还是非常浅薄的，至于智慧更是几乎一无所知。唯一能推断的就是，语音交互确实是我们获取知识的一种重要手段。鉴于以上的认识和误解，笔者认为应该写篇这方面的科普文章，虽然笔者也不精通这个领域，但是我们可以从底层声学这个范畴来思考和讨论一下人工智能相关的概念，确实这方面通俗易懂的资料太少了，也希望更多学术和产业领域的大牛们来指正和探讨。在此，笔者要先摆明自己的观点，目前人工智能的相关应用中，语音识别并非是关键点，而且语音识别也并未给我们生活带来多大变化。语音识别经过十多年的高速发展，特别是结合深度学习的融合发展，目前的精度已经相当高，然而达到99%以后，再提升就显得非常困难。但为什么语音识别的精度到达如此程度，我们却对其仍然不满意呢？其实，这和语音识别的关系不大，是我们误把语言理解的概念强加给了语音识别。实际上，语音识别只是人工智能中的一个小学科，现在也可以算是深度学习中的一个分支。类似于人类，语音识别至多是我们听觉系统内的一个神经单元，只负责将语言转化成人类可听到的信号激励，若在计算机应用中，就是转化成我们常说的文字。那么关键点在哪？从各大巨头发布的宣传资料和介绍的相关信息来看，实际上大家都在追求：自然语言处理(NaturalLanguageProcess，NLP)或者说自然语言理解(NaturalLanguageUnderstanding，NLU)的突破。当然，这也是得益于基础声学和语音识别的巨大进步。基础声学和语音识别解决的是计算机“听得见”的问题，而NLP实际上就是要解决计算机“听的懂”的问题。这么看来，“听的懂”才是目前十年内最为关键的问题，下面，笔者就NLP的概念以及国内外的学习资料进行盘点与分析。语音和语言有何区别？我们首先要明确一下语音和语言的区别，这是一个基础性的问题。语音是语言的信号载体，语音是人的发音器官发出的，承载一定的语言意义，而语言才承载人类的智慧。通俗的讲，语音是天生就存在的，婴儿的咿呀咿呀也算是语音，甚至其哭声也代表一定的意义，而语言则是需要学习不断进化的。人类的进化为什么自然的选择了语音作为交互的手段？一般认为，是因为语音有着得天独厚优越性，比如声音比光更容易传播，而且不受昼夜变化影响，同时也有更广的传播范围。当然，也有许多科学家提出反对的声音，比如很多动物的听觉实际上比人类更为发达，为什么却没有进化出来语音交互呢？这个问题我们暂时放到后面文章探讨，事实上动物界中的很多动物也会发出一定的声音来进行信息的交互，但是仅有语音交互是不够的。单独强调语音，而不说语言实际上没有任何意义的。当然语言也不仅是只有语音这一种载体，语音是不好保存和搜索的，所以人类还发明了文字这个神奇的东西。文字却又是通过视觉来感受的，不过文字也仅是帮助我们映射而已。象形文字刚开始的时候，还和视觉有直接的关联。后来，不论是汉语，还是其他语言基本上都进行了抽象，与听觉以及视觉的关联不再明显。到此为止，语言就已经完全抽象出来，和我们所理解的概念相关了，已经远远超过了语音、图像等识别的概念，甚至数学也成为了我们的一种语言。因此当人类使用语言来存储知识和表示概念的时候，计算机和机器人也就必须学会适应这种方式。也就是说，计算机和机器人在未来的趋势中，必然是理解语言这个极其复杂而又承载人类知识传承的表达方式。但是，做到这一点是极其困难的，虽然我们看到了很多的进展，但是，机器理解语言在短期内还无法看到实质性的突破。这个领域需要更多优秀的人才加入，笔者写这篇文章目的也是这个原因，人才的涌入才会带来希望，至少我们不断的积累总会带来些许进步。如何描述和定义NLP？事实上，自然语言处理，或者说自然语言理解，或者说计算语言学很难有个准确的定义。1999年美国计算机学家BillManaris曾这样描述：自然语言处理是一门研究人与人交际中，以及人与计算机交际中的语言问题的学科。自然语言处理研究表示语言能力、语言应用的模型，通过建立计算机框架来实现这样的语言模型，并提出相应的方法来不断地完善这样的语言模型，还要根据这样的语言模型来设计各种实用系统，并探讨这些实用系统的评测技术。笔者认为这个概念定义的比较准确，但又太过泛泛了。所以，很多时候我们仍然非常迷惘，然而这没有问题，因为语言本身就是我们人类最为复杂的概念之一。这些年NLP的研究得到了前所未有的重视并获得了长足的进步，逐渐地发展成为一门独立的学科。而NLP又与基础声学、语音识别等技术互相渗透，而形成了众多新的研究分支。而这些分支的发展也在大众中混淆了概念，大家干脆就把语音识别理解成了我们上面所啰嗦的那么多内容。NLP涉及哪些研究内容？自然语言理解的研究内容包含太多了，我们这里也仅能列举其中一部分，包括中文自动分词，词性标注，句法分析，自然语言生成，文本分类，信息检索，信息抽取，文字校对，问答系统，机器翻译，自动摘要，文字蕴涵等等，其中，基础声学和语音识别等相关学科也可以纳入这个研究范畴。自然语言理解研究的目标自然是希望通过图灵测试，包括了语音、形态、语法、语义以及语用等方面，也要解决人类语言中的因果、逻辑和推理的问题。这是非常重要的，我们知道大数据仅仅是代表了历史的规律和预测的趋势，如果没有因果关系和逻辑推理，计算机和机器人就始终无法为人类提供可参考的建议，甚至是决策。NLP当前难点都有哪些？这个就太多了，上面我们提到过了，人类的语言融合了语音和文字，实际上也是听觉和视觉的融合，不是割裂开的。但是，现在这两个学科却是互相独立的，人为造成了这种研究的困难。另外，人类的语言多样化，每种语言的表达方式也千差万别。理想主义甚至认为人类的很多语言知识是与生俱来的，这个说法也有一定的实验支持，声学在线曾经报道过这方面的进展。不过，即使经验主义也是认为语言是通过感官和人脑的联想与抽象得来的。这是个大问题，因为这让很多研究人员没有了思路，科学的进展最怕这种困难。很多时候，我们还都把科学的进展归结为哲学的进步，没有了思路也就很难找到突破点，这需要基础研究的进展。当然NLP现在实际的技术困难还是语义的复杂性，包含因果关系和逻辑推理的上下文等。现在解决这些问题的思路主要还是深度学习。深度学习带给了研究人员一种全新的思路，这倒不是最新的，BP神经网络刚兴起的时候，学术和产业界也是非常热闹，因为当时的研究人员认为总算找到了思路，后来BP神经网络几乎没啥实质进展，渐渐的就冷了很长一段时间。深度学习拓展了神经网络的层次，而且大数据的积累和并行计算的增强则给这种方法奠定了基础，这也是最近机器学习非常火热的原因。因此基于大数据、并行计算的深度学习将会给NLP带来长足的进步，但是若想达到人类的这种理解层次，恐怕仅靠这种方法也很难实现。NLP学习的参考资料有哪些？笔者一直在说自然语言理解的问题，文字还是最为重要的知识传承方式，因此自然也要提供些参考资料给大家，但是这个领域的科普书籍实在太少了，笔者也只能推荐一些书籍、网上资料给大家参考学习，姑且先把这篇文章作为入门科普的参考吧。首先，笔者建议还是要先看斯坦福大学的视频学习课程，哥伦比亚大学的视频学习课程也不错，只是这些课程还是英文的，国内也有几位老师的公开视频可以参考，比如宗成庆老师或者关毅老师的自然语言理解课程，冯志伟老师的计算语言学课程都还不错。微信上不方便放链接，感兴趣的朋友就到我们声学在线的网站上直接点击链接吧。其次再推荐一些书籍，首推还是DanielJurafsky和JamesH.Martin的《SpeechandLanguageProcessing》，已经出第二版本了，也是国内外的主要教材。这两人还写了几本相关方面的书，都还不错，亚马逊等一些线上平台搜索一下就能查到。国内也有冯志伟老师翻译的《自然语言处理综论》可以参考。数学基础稍好的还应该看看《数学之美》（吴军）和《统计学习方法》（李航），计算机编程稍好的更应该看看《机器学习实战》（PeterHarrington)和《Python自然语言处理》（StevenBird）等。最后再推荐一些学术会议，通过查询这些学术会议可以获知很多的学术进展，最重要的是，可以通过这些学术组织的会员和文章了解很多相关的研究单位，这些学术会议包括：ACL:TheAssociationforComputationalLinguistics，AAAI:AssociationfortheAdvancementofArtificialIntelligence，ICCL:TheInternationalCommitteeonComputationalLinguistics，COLIPS:TheChineseandOrientalLanguagesInformationProcessingSociety以及中文信息学会等。NLP都有哪些知名研究机构？笔者通过声学在线的众多朋友汇总了一些信息，可能不是很全面，不足的地方还请各位批评指正，这些研究机构（排名不分先后）包括：斯坦福大学自然语言处理研究小组，卡内基梅隆大学语言技术研究院，哥伦比亚大学自然语言处理研究组，约翰霍普金斯大学语言和语音处理研究组，康奈尔大学NLP研究组，宾夕法尼亚大学NLP研究组，伊利诺伊大学香槟分校NLP团队，南加利福尼亚大学自然语言研究组，爱丁堡大学语言与计算研究所，谷歌苏黎世研究院，亚马逊NLP研究组，香港科技大学NLP实验室，中科院计算机所自然语言处理研究组，北京大学计算语言学研究所，清华大学人机交互与媒体集成研究所，中科院声学所语言声学与内容理解重点实验室，中科院自动化所模式识别重点室，百度自然语言处理部，中科大人机语音通信研究评测实验室，哈尔滨工业大学计算机学院智能技术与自然语言处理研究室等。总之，自然语言理解随着深度学习的发展，还是看到了很多进展，但是NLP所需要解决的语言问题真的是非常复杂，近期内还是难以有所突破。正因为有这些挑战，才更需要更多有才华的人才持续不断的投入这个行业，而且这是未来数十年的新兴行业，现在刚毕业的优秀学生都有可能拿到50万的年薪，其经济收入将是很可观的。当然这也是个问题，虚高的投入或许会给这个行业带来一些阻碍。原文源自“声学在线soundonline”未经授权，严禁转载。特别声明：以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布，本平台仅提供信息存储服务。
Notice:Thecontentabove(includingthepicturesandvideosifany)isuploadedandpostedbyauserofNetEaseHao,whichisasocialmediaplatformandonlyprovidesinformationstorageservices.
/阅读下一篇/返回网易首页下载网易新闻客户端