《【会议集】2022北京智源大会观点报告.pdf》由会员分享,可在线阅读,更多相关《【会议集】2022北京智源大会观点报告.pdf(202页珍藏版)》请在三个皮匠报告上搜索。
1、编写委员会智源社区内容团队策划李梦佳主编李梦佳 熊宇轩 戴一鸣 钱曙光 常 政 廖 璐执行组(排名不分先后)编辑组熊宇轩 肖 健 任黎明 王光华 沈磊贤 孙 晨 张 虎 杨依帆 胡雪瑜 周致毅 梁 子 李佳伦 陈 旭 白 鹏 路啸秋 路梦康 马瑞军 顾胜宇 王 辉 牛梦琳 姜蔚蔚 刘延龙 成小会 李 洋 崔靖男 徐树皓 王惠娟 付思雯【智源人工智能的认知神经基础团队博后】在过去三年里,由北京智源人工智能研究院(以下简称“智源研究院”)主办的北京智源大会见证了 AI 领域的跨越式发展,成为了业内兼具专业性、权威性、丰富性的品牌活动。今年的大会上,来自海内外的专家纷纷发表了最新的研究进展。其中,图
2、灵奖得主 Adi Shamir 深入阐述了凹槽流形最新理论,揭秘了对抗性样本奥秘;强化学习之父 Richard Sutton 提出了利用经验启发 AI 发展的思路,将 AI 从利用数据到利用经验的过程分为四个发展阶段,提出了未来构建真正 AI(Real AI)的发展方向;梅宏院士介绍了群体智能研究的历史与最新进展,并讨论了如何构造基于探索-融合-反馈机制的群体智能模型;Meta AI 西雅图研究负责人 Luke Zettlemoyer 从团队工作出发,讲述了万亿参数后,大模型是否会持续增长,以及当前如何更好地利用语言模型。在这第四个年头里,AI 各领域的技术和产业趋势风云变幻,出现了诸多新的拐
3、点。在自然语言处理领域,预训练大模型进展迅猛,在以视觉-语言多模态大模型(如CLIP、DALL-E 系列等)为代表的下游任务上取得了惊艳的性能,形成了新的研究热点。大模型在隐知识、可解释性方面有较大进展与突破。与此同时,情感计算识别技术也已成为研究热点,在抑郁线索、精神压力分析等方面发挥着重要的作用。产业化方面,伴随着 Hugging Face 等公司的强势崛起,人们在工程+产业结合方面取得了一轮又一轮的新突破。除了通过大模型学习通用知识表征,如何以人类为模板,充分利用低资源数据进行小样本学习,也是极具前景的研究方向。前 言在视觉领域,随着 Transformer 被引入计算机视觉领域,视觉基
4、础模型研发迎来了又一个新的高潮。一时间,基于视觉 Transformer 的骨干模型设计、自监督学习、模型扩展、下游应用等研究井喷式爆发。2021到2022年,Swin Transformer、ViT 等突破性工作层出不穷。在强化学习领域,强化学习算法在仓储物流、共享出行、电网优化调度等现实场景中有着广泛的应用。在围棋、Atari、星际争霸等游戏中战胜顶尖人类选手后,游戏场景下的强化学习研究朝着多样化、多智能体协同决策的方向发展,如何让智能体在复杂多变环境下的游戏中取得超越人类的表现成为一个颇具挑战的问题。认知神经领域,AI与脑科学的碰撞和交融还有无限的空间。脑科学的第一性原理正在成为AI创新
5、的认知神经基础。Karl Friston 认为,主动推断是知觉行为的第一性原理,如强化学习、主动学习、贝叶斯最优推断等很多和知觉行为相关的算法均可以从这一原理推得。而未来,在无数的基本原理之上,想要真正实现通用人工智能,还需要基于大脑中的无数细节对复杂的真实世界进行表征和模拟。AI for Science 领域,在分子动力学模拟、开源软件和药物设计方面均有诸多体现,以图神经网络为代表的先进机器学习算法在这些领域掀起了颠覆性革命。机器学习与科学模型的有机结合,给传统的科学领域带来了新的发展机遇,也正在推动科研范式的创新。在产业落地方面,人工智能技术催生了自动驾驶、生物制药、生命健康等产业领域的飞
6、速发展。未来,人工智能技术将成为元宇宙概念的支柱性技术,实现虚拟与现实的智能互联。那时,AI将无处不在。CONTENTS共筑九鼎 智能花开:智源发展报告 智源研究进展142231 35 40444648 开幕式及全体大会/特邀报告01报告一:The Increasing Role of Sensorimotor Experience in Artificial Intelligence 报告二:如何构造人工群体智能?报告三:A New Theory of Adversarial Examples in Machine Learning 报告四:Improving Multimodal Eval