《胡亮-类脑认知多模态大模型:连接人类大脑、AI大脑和机器人大脑的基础.pdf》由会员分享,可在线阅读,更多相关《胡亮-类脑认知多模态大模型:连接人类大脑、AI大脑和机器人大脑的基础.pdf(58页珍藏版)》请在三个皮匠报告上搜索。
1、ML-SummitML-Summitwww.cpp-www.ml-summit.orgwww.gosim.orgwww.pm-summit.orgML-SummitML-SummitML-SummitML-SummitML-SummitML-Summit同济大学计算机科学与技术学院教授、博导。入选国家海外高层次青年人才,上海海外高层次人才,分别在上海交通大学获得计算机应用技术博士学位,澳大利亚悉尼科技大学(UTS)获得分析学(Analytics)博士学位。已主持和参与完成多项国家级科研项目。研究领域包括人工智能、推荐系统、数据科学、隐私计算、大模型、以及跨学科交叉融合的新一代智能技术。已经发表
2、相关的高水平论文百余篇,多篇论文都具有本领域内开创性的成果。担任众多高水平人工智能国际会议(IJCAI、AAAI、ICDM、CIKM、KDD、CVPR、ICML、NeurIPS等)程序委员会委员,十余个著名国际期刊的审稿人,包括ACM CSUR、IEEE TKDE、ACM TOIS、IEEE TPAMI等。主办了2023、2024年两届IEEE ICAACE 2023/ICAACE 2024国际会议,并担任大会主席。此外,胡亮教授还担任中国人工智能学会粒计算与知识发现专委会执行委员、中国计算机学会协同计算专委会执行委员。兼任中船九院客座教授、深兰人工智能(上海)股份有限公司专家工作站首席专家、
3、上海二六三通信有限公司专家工作站首席专家,积极推进产学研结合的进程,所提出的方法已被转化落地应用于电子商务、医疗、税务、金融、交通等不同领域的实际项目中,解决了其中一些核心难题。演演讲讲主主题题:类类脑脑认认知知多多模模态态大大模模型型:连连接接人人类类大大脑脑、A AI I大大脑脑和和机机器器人人大大脑脑的的基基础础胡胡亮亮 同同济济大大学学计计算算机机科科学学与与技技术术学学院院教教授授、博博导导ML-SummitML-Summit2025 全球机器学习技术大会类脑认知多模态大模型连接人脑、AI大脑和机器人同济大学计算机科学与技术学院胡亮 教授ML-SummitML-Summit目录CON
4、TENTS多模态大模型崛起和存在的局限大脑记忆与遗忘对大模型的启发神经科学启发的大模型持续学习脑信号的解码与类脑多模态编码ML-SummitML-Summit多模态大模型崛起和存在的局限01ML-SummitML-Summit2023年被称作ChatGPT元年围绕AI大模型的新经济产业已经点燃全世界AI大模型的普适性和产业化程度提高正带来整个社会的经济结构的巨大变化ChatGPT元年ML-SummitML-SummitDeepSeek国产大模型横空出世ML-SummitML-Summit机器人亮相春晚ML-SummitML-Summit人脑、大模型、机器人之间仍然存在巨大的鸿沟ML-Summi
5、tML-Summit大模型的发展路径受到质疑ML-SummitML-Summit多模态大语言模型通过自然语言对齐ML-SummitML-Summit自然语言交互存在局限性Agent:Turn Left?User:RightML-SummitML-Summit跨模态精确对齐困难长发并非广告中瀑布般的“完美”直发,而是带着自然卷曲的弧度,发尾曾被阳光漂出几缕琥珀色。转头时,碎发会短暂地粘在涂了薄荷唇膏的嘴角。ML-SummitML-Summit架构进化缓慢Word2vecTransformerTransformer DecoderBERTALBERTDistilBERTGPTGPT-2,3ELMo
6、ML-SummitML-Summit大模型训练成本高昂ML-SummitML-Summit大脑记忆与遗忘对大模型的启发02ML-SummitML-Summit机器学习中的记忆与遗忘?人脑记忆与遗忘的协同现实世界需求机器持续学习与遗忘的协同?模型记忆与遗忘:冲突性记错了?忘错了?持续性适应动态演化环境?从过去的经验学习、适应未来,构建认知。记忆(v.)与遗忘的协同是大脑保持高效的秘诀。记忆(n.)是持续动态演变的非静态存储库。需求与政策推动人工智能拥有持续学习新知识并清除特定记忆的能力记?忘?过去经验?未来知识?有害信息?隐私信息?ML-SummitML-Summit机器遗忘解决问题:从模型中完