12月8日下午,新葡萄8883官网AMG邀请微软亚洲研究院资深首席研究员段楠博士在A教204为学院师生带来了题为“从生成式AI到组合式AI智能体”的精彩学术报告。报告由系主任忽丽莎副教授主持,学院近100名师生参加。
段楠教授在生成式大模型构建方面拥有丰富的研究经验和卓越的学术成就。段教授分别从大语言模型、多模态大语言模型、多模态生成式AI和AI智能体四个方面介绍生成式大模型的发展趋势。在大语言模型这一部分主要回顾大模型及其具备的涌现能力,并介绍基于大语言模型的生成增强技术,包括基于检索增强的生成算法、基于自洽的生成算法、基于验证机制的生成算法等;在多模态大语言模型这一部分介绍了多模态大语言模型的主要训练方法;在多模态生成式AI这一部分,首先以MSRA的女娲项目为例,系统介绍从语言到视觉内容的生成模型和算法,并进一步介绍多模态生成式AI在构建通用人工智能中的意义以及最新的工作;在AI智能体这一部分,对AI智能体的主要模块进行介绍,包括任务规划和动作预测模块、世界模型、记忆模块、外部工具选择和整合模块等。在本报告的最后讨论了未来可能的研究方向。
本次报告为师生提供了与顶尖学者深入交流的机会,充实并丰富了与会人员对多模态大语言模型的认知与了解,开阔了师生的眼界;也加强了与其他高校之间的学术合作与交流,有效推动了新葡萄8883官网AMG后续相关研究方向教育教学等工作的顺利开展。
段楠,博士,微软亚洲研究院资深首席研究员,自然语言计算团队研究经理,中国科学技术大学、西安交通大学兼职博导,天津大学兼职教授,主要从事自然语言处理、多模态智能、代码智能、机器推理等研究,多次担任NLP/AI学术会议程序主席和领域主席,发表学术论文100余篇,Google Scholar引用10000余次,持有专利20余项。(供稿:新葡萄8883官网AMG)