2023年科技趋势推荐之人工智能 ——图书馆前沿热点技术推荐(2)
2022年科技趋势推荐之人工智能——图书馆前沿热点技术推荐(2)
2022-03-09
大模型参数竞赛进入冷静期,大小模型将云边端协同进化[1] 近日阿里达摩院通过「定量发散」与「定性收敛」,分析了近三年来的770万篇公开论文、8.5万份专利,通过挖掘其中热点及重点技术突破,深度访谈近100位科学家,提出了2022年可能实现的十大科技趋势。本期推出第二趋势:大小模型协同进化 大规模预训练模型是从弱人工智能向通用人工智能的突破性探索,解决了传统深度学习的应用碎片化难题,但性能与能耗提升不成比例的效率问题限制了参数规模继续扩张。人工智能研究将从大模型参数竞赛走向大小模型的协同进化,大模型向边、端的小模型输出模型能力,小模型负责实际的推理与执行,同时小模型再向大模型反馈算法与执行成效,让大模型的能力持续强化,形成有机循环的智能体系。谷歌的BERT、OpenAI的GPT-3、智源的悟道、达摩院的M6等大规模预训练模型取得了重要进展,大模型的性能有了飞跃性提升,为下游的AI模型提供了发展的基础。然而大模型训练对资源消耗过大,参数数量增加所带来的性能提升与消耗提升不成比例,让大模型的效率受到挑战。 大模型的参数规模发展将进入冷静期,大模型与相关联的小模型协同将是未来的发展方向。大模型沉淀的知识与认知推理能力向小模型输出,小模型基于大模型的基础叠加垂直场景的感知、认知、决策、执行能力,再将执行与学习的结果反馈给大模型,让大模型的知识与能力持续进化,形成一套有机循环的智能系统,参与者越多,受惠者越多,模型进化的速度也越快。 新的智能体系带来三个优势:一是让小模型更容易获取通用的知识与能力,小模型专注在特定场景做极致优化,提升了性能与效率;二是解决了过去大模型数据集过于单一的问题,小模型在真实场景回收的增量数据,让大模型有再进化的元素;三是全社会不需要重复训练相似的大模型,模型可以被共享,让算力与能源的使用效率最大化。 在协同进化的智能系统下,复杂系统内部可以更有机地融合,如城市治理的场景,大脑是治理中枢,边端是各路摄像头及边缘设备。边端的摄像头将看到的数据进行学习,将学习的结果反馈给治理中枢,治理中枢再赋能给其他类似场景的摄像头,形成有机进化的系统。新的智能体系需要克服三个挑战,一是大模型与知识常识的融合,将以规则存在的知识利用起来,提升模型通用能力的同时也降低训练所需的数据量,让大模型从数据驱动走向知识与数据融合驱动;二是大小模型的协同机制,包含大模型的知识与能力向小模型降维迁移的有效性、小模型的小样本学习向大模型的升维融合、不同维度数据的清洗与治理等;三是大模型的可解释性,对大模型依赖上升的同时,信任决定是否能被广泛使用。 在未来的三年内,在个别领域将以大规模预训练模型为基础,对协同进化的智能系统进行试点探索。在未来的五年内,协同进化的智能系统将成为体系标准,让全社会能够容易地获取并贡献智能系统的能力,往通用人工智能再迈进一大步。附:2021年人工智能前沿科技部分趋势[2]1.无线高带宽、微创、结合AI算法等成为脑机接口的发展重点。2.传统科研领域成为人工智能发展的“新战场”,人工智能在辅助基础和应用科学研究的同时,也提升了智能产品和服务的性能。3.强化学习环境成为发展泛化性更强、适应复杂环境智能体的重要支撑,而提升训练效率成为强化学习领域的研究重点。4.因果推断在经济学、社会学研究中实现突破。5.基于超大规模预训练模型的平台和系统成为研发机构和企业的发展思路。6.面向更为复杂任务和需求的基准测试和数据集不断涌现。7.AI为人类科学家提供领域数据集,助力基础科学研究。8.AI算力成为超算性能比拼的“新擂台”。 注释:1.达摩院:2022十大技术趋势.[EB/OL].[2022-01-10].https://damo.alibaba.com/techtrends/20222.北京智源人工智能研究院:2021年人工智能前沿报告.[EB/OL].https://baai.org/l/Frontiers2021 往期精彩推荐2022年科技趋势推荐之人工智能——图书馆前沿热点技术推荐(1)
IEEE Fellow李世鹏 :人工智能与机器人前沿研究之思考
作者 |维克多编辑|青暮
2021年12月9日,由粤港澳大湾区人工智能与机器人联合会、雷峰网合办的第六届全球人工智能与机器人大会(GAIR2021)在深圳正式启幕,140余位产学领袖、30位Fellow聚首,从AI技术、产品、行业、人文、组织等维度切入,以理性分析与感性洞察为轴,共同攀登人工智能与数字化的浪潮之巅。大会次日,思尔实验室主任、前深圳市人工智能与机器人研究院执行院长、国际欧亚科学院院士、IEEEFellow李世鹏在GAIR大会上做了《人工智能与机器人前沿研究之思考》的演讲。李世鹏博士,IEEEFellow,国际欧亚科学院院士。历任深圳市人工智能与机器人研究院首席科学家和执行院长、科大讯飞集团副总裁及讯飞研究院联席院长、微软亚洲研究院创始成员与副院长。李院士在多媒体、IoT及AI等领域颇具影响力。他拥有203项美国专利并发表了330多篇被引用了的论文(H指数:82)。被Guide2Research列为世界顶尖1000名计算机科学家之一。培养出四位MITTR35创新奖的获得者。是(科技部)新一代人工智能产业技术创新战略联盟发起人之一及联合秘书长。在演讲中,李世鹏介绍并展望了人工智能与机器人前沿研究方向,他指出:未来机器学习突破深度学习的数据瓶颈或许可以借助认知科学的方法得到突破,学习范式可从依靠“大数据”转变成依靠“大规则”;人机协作也要进化为人机“谐”作,只有将耦合、交互、增强、互补等目标纳入研究方向,才能实现人机的无缝连接。以下是演讲全文,AI科技评论做了不改变原意的整理:今天的演讲题目是《人工智能与机器人前沿研究之思考》,分为三个部分,先谈人工智能和机器人研究全景,然后聚焦研究方向,包括机器学习、运动智能、人机谐作、群体协作;最后进行总结。
人工智能相关研究的关键元素有三个:人、机器人/物联网以及AI。之所以将机器人和物联网归为一类,是因为这两者是物理世界和虚拟世界的接口。如果三个元素两两之间发生联系就会形成一个新的学科,例如机器人和AI相结合会产生智能体,AI和人类相结合会产生人机耦合以及增强智能,而机器人和人类相融合会形成增强机体。随着人工智能与机器人领域的发展,研究对象不再局限在单个智能体,而是越来越多地对多个智能体的协作进行研究,例如人类社会群体如何更好地相融合?如何设计出能够精妙协作的机器群体?总体而言,我认为重要的基本研究方向是:机器学习、运动智能、人机谐作、群体协作。
1聚焦方向之机器学习机器学习的发展离不开深度学习加持,它给行业带来许多研究成果,并赋能了语音识别、人脸识别、物体识别、自动驾驶等方面,推动人工智能产业高速发展。虽然成果颇丰,但成也萧何败也萧何。深度学习依赖于大数据,其瓶颈也在于大数据。例如国内的智能语音技术尽管处于行业领先,但仍依赖技术积累和数据积累。现在想要让深度学习发挥巨大威力,仍然需要大量数据的加持,如果想让深度学习从一个领域扩展到另一个领域,也少不了数据支撑。
如何突破?研究者已经探索了多条路径,其中一个解决方案是:扩展深度学习框架。例如优化深度学习算法、知识图谱+深度学习、专家系统+深度学习等等。另一条路径是因果推理,其目标是借助人类举一反三的能力,期望超越数据之间的相关性,进而探索数据之间的因果性,从而得到数据之间的逻辑推理。第三条路径是类脑计算,从生物学角度,探索人脑认知元素和机制,以仿真方法再现人类大脑。个人认为认知科学是突破深度学习框架的着力点。理由是人类认知过程有两点需要我们去进一步借鉴:生而知之、学而知之。生而知之是指部分认知能力与生俱来,新生儿的脑神经有很多先天的连接。它给我们的启示是:现在的大多深度学习算法,大部分都是从零开始训练,而没有充分或者高效利用先验知识或者已有模型。如何利用“现有知识”是深度学习的下一个热门方向。学而知之是指大部分认知能力是后天学习到的,尤其是早期学习。通过学习脑神经建立了更多的连接。孩子很多能力,包括感知、应对、语言、读写和理解,甚至分析问题和解决问题的思路和能力在很小时候已经基本定型;以后基本都是知识的积累。这意味着脑神经元很早的时候就连接定型成一个元模型,剩下的是只是利用这个元模型去解决具体领域的问题。这个与当前的大规模预训练模型有着惊人的相似之处。学而知之的另一层次是:人类学习过程依靠多源的、多传感的、多模态的、多角度的数据,例如视觉、听觉、嗅觉、触觉和语境等联合信息,而今天的深度学习依靠大都是一段语音、一张照片,因此,未来AI模型的输入数据可能不仅是单一的数据,而是多个信号源的融合。如何模仿人类学习的过程,这是认知科学对深度学习的另一个启示。再者,人类学习过程是一个从样本示例到原理归纳的过程,而不是仅停留在样本示例层面;目前深度学习却都是停留在样本层面。那么,未来是否能够构造类人的机器学习框架,无论输入什么样的数据,只要逻辑相通,都会收敛到一致的模型?突破深度学习的数据瓶颈,可以尝试构建规则的众包系统,让人类教机器学习过程,其目的不是输入数据,而是让机器学习规则。由于我们试图从日常的活动中学习规则,这种规则普通人都可以标注示教,这就打破了以前专家系统地需要“专家”的局限。这种从“大数据”过渡到“大规则”模型构建方式显然也更符合人类的认知。2聚焦方向之运动智能众所周知,在机器人领域,波士顿动力公司的产品最“像人”,如上动图,机器人跳舞丝毫看不出生硬的感觉。但受计算资源、能量、运动控制的限制,它只能运行几十分钟。其实,波士顿动力机器人的运行方式是基于电机驱动,存在很多缺点,例如刚性运动、自重比较大、反应速度和灵活性的矛盾以及耗能大。
对比人类和其他动物的运行方式,肌肉、骨骼、传感和神经的结合可以在低能耗情况下,实现灵活运行。这给研究者的启示是,机器人的运行系统应该像人一样满足:高效、灵活、精确、鲁棒、刚柔并济、轻量、自适应等指标。当前的运动智能可能在某一个维度表现优秀,但综合考量仍然有很多缺点。因此,运动智能的一个重要研究方向是:仿生。仿照动物的运动智能,例如运动控制采用逼近反馈式,运动过程视变化随时灵活调整。如果说机器人是靠“内力”驱动,而医疗微纳米机器人是“外力”研究方向的代表。例如依靠磁力,小机器人精确地将药物从一个管道运送到另一个管道。3聚焦方向之人机谐作在人机谐作层面,区别于协作,“谐作”代表人机协作中的耦合、交互、增强、互补、协作、和谐等意思。人机谐作的目标是:不需要告诉机器人类的意图,机器就能领会,从而达到人机的无缝连接。在达成人机谐作的过程中,重点研究人机自然交互、感知及增强。具体可能包括:生物特征检测和识别、人机接口、脑机接口、语音识别、动作识别、表情识别、语言理解、意图理解、体态感知、无隙增强,以及在扩展现实与远程现实的延伸等等。人机增强智能方面,今天的机器学习框架大都是基于大数据的深度学习框架,肯定会遇到机器智能处理不了的情景。这对于某些高风险领域,例如自动驾驶、金融等来说是致命的。针对这一问题,当前的解决方案是“人类接管”。这会涉及三个核心问题:核心问题1:机器智能如何感知自己处理不了一些情况,而主动要求人来接管?核心问题2:什么时候人类可以完全放手给机器自主完成任务?核心问题3:什么样的人机交互设计能充分发挥人和机器各自的长处,同时又无需非必要地麻烦对方?三个核心问题如果无法解决,会导致一些困境。例如,以自动驾驶为例,目前安全员并不是开了“自动”功能就一劳永逸,仍然需要时时监测路况与路线,一刻都不能分神。这其实增加了安全员的负担,因为在没有自动驾驶的时候,人类对自己的驾驶环境会有一定的预测,而机器驾驶的情况人类无法预测。人机增强机体也属于人机谐作的一个领域,能够帮助人类增强物理机体能力,完成一些人类自身体力完不成的事情。但机器可能过于复杂,需要人类培训后才能操作。人机增强机体的未来目标是实现人与机器和谐共处,操控起来如同人类的自己的器官一样自然。其中,涉及的核心研究课题包括:机器感知人的意图、人的姿态、理解人的自然语言命令、肢体语言等等,从而让机器以最适合人类接受、恰到好处的平滑方式帮助人解决问题。4聚焦方向之群体协作目前单智能体已经可以完成许多任务,但如何发挥每个智能体集合起来的威力?这涉及群体协作的研究方向。在仓储场景下,存在许多抓取分类的机器人,如果能够有效调度,那么必将大大提高工作效率。当前主流的调度方式是中心化的控制方式,但面对成千上万的规模的智能体,则需要非中心化的控制,允许智能体之间存在自主行为,在相互协作的同时,还能“做自己的事”。即单独的有智能可独立行动的智能体,通过协作而达到的更高效的群体/系统智能和行为。智能体群体协作目前涉及的规则包括,群体行为模型和激励机制、群体智能协同决策。这一方面,蚂蚁是我们的学习对象。另外,在自动驾驶方面,越来越多自主驾驶机器人出现,它们之间如何做到协同感知和协同控制也是当今热门话题。上述四个方面属于基础性的研究,任何一个领域出现了突破,那将对其领域以及下游应用而言都是革命性的突破,也将带来工业数智化原创技术的创新,会让我们在竞争中占领优势地位!雷峰网雷峰网(公众号:雷峰网)雷峰网原创文章,未经授权禁止转载。详情见转载须知。
人工智能发展与应用综述
人工智能发展与应用综述摘要自人工智能的概念在1956年被提出以来,研发者们就不断研究,六十多年的发展,在理论研究以及应用领域都已取得了喜人的成果,人工智能在医疗,交通,教育,商业,信息安全等领域已经深入国民生活。本文对人工智能概念进行解读,并对人工智能发展与应用进行综述,探索人工智能发展轨迹,以更好认识人工智能,对行业技术与发展有更深刻的理解。
关键词:人工智能发展应用综述总结1、引言人工智能的概念越来越深刻影响着人类的生活,如同蒸汽时代的蒸汽机,电气时代的发电机,信息时代的计算机,人工智能已经成为推动人类进入智能时代的决定性力量。当然,人工智能并不是凭空产生的,其发展具有一定的过程,在无数科学研究者,学者的辛勤努力下,人工智能研究的研究体系已经初见成果。人工智能的概念产生于欧美、日本等国家,并迅速风靡全球,可喜的是,根据清华大学发布的《人工智能发展研究报告2018》统计,我国已经成为全球人工智能投资融资规模最大的国家,我国人工智能在人脸识别,语音识别,安防监控,智能音箱,智能家居等人工智能应用领域处于国际前列。根据2017年,爱思唯尔文献数据库[1]统计结果,我国在人工智能领域发表的论文数量已居世界第一。当然,作为一项新兴事物,人工智能并非完美无缺,在许多方面仍然有较多的困难尚未攻克,本文对人工智能发展与应用进行综述[2、3],指导正确看待这一新兴事物,更好指导未来的技术发展。
2、人工智能以及核心概念由于“智能”这一概念难以确切定义,图灵用:“机器能够思考吗?”这一问题代替。图灵提出通过对机器进行“图灵测试”,以判断它是否具有智能。“图灵测试”就是让机器当做人,与人进行对话,如果有30%的测试人相信此机器是人类,那么这台机器被认为具有智能。美国斯坦福大学人工智能研究中心尼尔逊教授给人工智能下了这样的定义:人工智能是关于知识的学科,是怎样表示知识以及怎样获得知识并使用知识的科学。从实用观点来看,人工智能是一本知识工程学:以知识为对象,研究知识的获取,知识的表示方法和知识的使用。目前学术界将人工智能分为强人工智能和弱人工智能,强人工智能就是机器具有自我意识,要求机器有知觉有意识。弱人工智能是指没有知觉意识的智能,机器按照事先写好的程序进行工作,并不拥有智能。
(1)、机器学习机器学习[4]是人工智能的核心技术,是使机器拥有智能的主要途径,是指让机器模拟人的学习能力,以此来增强机器的性能。早在上个世纪图灵就给出了类似机器学习的想法,他设想让机器模仿儿童思维,使其接受正确的教育成长为一个成人的大脑。这种想法与当今学者研究的方向不谋而合。后来图灵与同事一起编写了程序去实践这种想法,机器能够做他们编写过的事情,除此之外,不会向人类一样在能力方面有更多的延伸。如何让机器自主的学习,在今天仍然是人工智能发展的难题。
(2)、人工神经网络是受人脑神经元的启发,试图设计与人脑结构类似的网络结构,模拟大脑处理信息的的过程,以提高运算速度。作为人工神经网络的一类,卷积神经网络已经广泛用于大型图像处理中。虽然人工神经网络无法与人类大脑媲美,在模式识别,医疗,智能机器人等领域取得的成果有目共睹。
(3)、专家系统是指依靠人类专家已有的知识建立的知识系统,是一种特定领域内大量知识与经验的程序系统。它应用人工智能技术,模拟人类专家求解问题的思维过程求解领域内的各种问题,其水平可以甚至超过人类专家的水平。目前专家系统开发最早应用最广泛的领域,多是医疗诊断,地质勘探,文化教育等领域。
3.发展历程回顾人工智能的发展可以有以下四个时期:孕育,形成,知识运用,综合集成四个阶段。孕育期:一般认为人工智能的最早工作是Warre基本出发点。Mcculloch跟WalterPitts完成的。他们提出一套人工神经元模型,两名普林顿大学数学系的研究生在1951年建造了第一台神经元网络计算机。不少早期工作可以被当做人工智能,古希腊的亚里士多德创立的演绎法,三段论的至今仍然是演绎推理的基本出发点。形成期:人工智能诞生于1956年的一次历史性聚会。几位来自美国的数学,神经学,心理学,信息科学和计算机科学的杰出科学家齐聚一堂,由麦卡锡提出了“人工智能(AI)”这一概念。会议过后,各地的科学家、学者纷纷研究相关知识,“人工智能”这一学科以及相关研究如雨后春笋一般形成。1969年的国际人工智能联合会议标志着人工智能得到国际的认可。知识应用期:1977年费根鲍姆在第五届国际人工智能大会上提出了知识工程的概念。从此之后,各类专家系统得以发展,大量的商品化专家系统和智能系统纷纷推出。专家系统的发展,也是得人工智能的发展范围扩大到了人类各个领域,并产生了巨大的经济效益。但是专家系统发展过程中也存在很多缺陷,应用领域窄,缺乏常识性知识,知识获取困难,不能访问现存的数据库等问题被逐渐暴露出来,人工智能面临着考验。综合形成期,在专家系统方面,从20世纪80年代末开始逐步向多技术,多方法的综合集成与多领域的综合应用型发展。大型专家系统开始采用了人工智能的多种语言,多种知识表示方法,多种推理机制和多种在控制策略相结合的方式,人工智能的发展进入综合形成期。目前,人工智能技术正在向大型分布式人工智能,大型分布式多专家协同系统,并行推理,多种专家系统开发工具,大型分布式人工开发环境和分布式环境下的多智能协同系统等方向发展。但是从目前来看,无论是人工智能理论还是实践都不够成熟,人工智能研究仍然需要科研工作者长期摸索。
4、人工智能的应用(1)、虚拟各人助理目前市面上的人工智能助理如:Siri,小娜等。个人助理能够帮助用户完成多项任务,多项服务,其推动力是人工智能技术。现阶段的人工助理一般具有基于上下文的对话能力,可以实现简单的人机对话,回答一些简单的问题。个人助理的应用包括语音识别,图像识别,深度学习等技术,其工作原理是“语音识别+云计算服务”。
(2)、自动驾驶谷歌公司一直致力于自动驾驶汽车的研究,2012年4月。谷歌公司宣布自动驾驶汽车已经行驶20万公里,这一数据已经接近汽车的最大里程数。我国自动驾驶技术的研究同样取得振奋人心的成果。2017年由海梁科技与深圳巴士集团等联合打造的自动驾驶客运巴士,正式进行线路的信息采集和试运行。
(3)、智慧医疗医疗一直是关系到国际民生的重要范畴。随着专家系统的不断发展完善,已有实例表明,人工智能可参与到医疗建设中。Watson[5]是IBM公司研发的采用认知计算系统的人工智能平台,watson肿瘤系统是其产品之一,可以作为辅助诊疗手段,与医院数据对接,实现病例数据的信息共享,还可以为临床医生在诊断过程中推荐诊疗方案,苏北人民医院2017年正式引入此系统,开启了智慧医疗的新时代。
5、我国人工智能发展趋势与展望人工智能技术发展至今60多年,其概念已经逐渐清晰,在生物,医疗,交通等领域孕育出了突破性的成果,但是人工智能技术能否发展到人类的水平仍然不能给出确切的答案。目前人工智能面临的问题主要是:
(1)、体系结构受限受限于冯诺依曼体系结构,目前人工智能系统在感知,认识方面无法突破瓶颈。这主要是由于传统的冯诺依曼体系结构采用的是存储程序的方法,程序是事先设定的,无法随着外界的改变而改变,这也是限制人工智能发展的关键。不过,我们有理由相信,在不久的未来能够克服这种制约。
(2)、社会问题困扰如果人工智能真的发展到与人类智慧媲美的程度,又会引发一系列的问题。一方面心理学上,“恐怖谷”理论就是假如机器人接近人类的时候,我们会对其产生莫名的厌恶和惧怕。另一方面,人工智能带来的社会问题同样困扰着人类,以自动驾驶汽车为例,3-18美国自动驾驶车辆车祸致人死亡的事件给自动驾驶技术的发展带来不小的冲击,事故责任的划分成为一大难题。目前人工智能的发展,主要是在弱人工智能发展并取得显著的成果,在强人工智能的研究上仍在开展,存在很多问题,有很大的发展空间,从目前的一些前瞻性研究可以看出人工智能可能会向以下几个方面发展:模糊处理,并行化,神经网络和机器情感。人工智能的下一个突破可能是赋予计算机情感能力。
参考文献
[1]中央人民政府驻香港特别行政区联络办公室副主任中国科学院院士谭铁牛.人工智能的发展趋势及对策[N].中华工商时报,2019-02-25(003).[2]张妮,徐文尚,王文文.人工智能技术发展及应用研究综述[J].煤矿机械,2009,30(02):4-7.[3]杨俊龙,柳作栋.人工智能技术发展及应用综述[J].计算机产品与流通,2018(03):132-133.[4]陈彦淇.简析人工智能的发展与应用[J].科技传播,2019(04):162-163+170.[5]曹敦煜.人工智能在心脏疾病诊疗中的应用[J].科技传播,2019(04):141-142.