
青年科学家报告专题一

刘静 中国科学院自动化研究所
题目:多模态大模型的研究与实践
时间:7月20日 14:00-14:30
摘要:多模态大模型是针对图文音视等各种弱关联模态信息,利用自监督学习与模型微调等手段,建立多模态融合表征、关联协同与相互转化等,已被认为是实现类人感认知能力的重要途径,现已得到无论在学术界还是企业界的广泛关注。本报告主要包含三方面内容:回顾当前多模态预训练的研究进展;简单介绍多模态大模型的工作原理;本人研究团队在多模态大模型构建与优化方面的最新工作。
讲者:刘静,中国科学院自动化研究所研究员,国科大岗位教授,国家优青。研究方向多媒体分析与理解,带领团队研发了国际首个图文音三模态大模型“紫东太初”。相关成果曾获中国电子学会自然科学一等奖,北京市自然科学二等奖,中国图象图形学学会科学技术二等奖,世界人工智能大会卓越人工智能引领者奖等。已发表高水平学术论文近200篇,谷歌学术引用15000+次,SCI他引6000+次。荣获国际学术竞赛冠军十余项。
青年科学家报告专题二

张通 华南理工大学
题目:多模态情感信息融合方法与应用
时间:7月20日 14:30-15:00
摘要:计算机多方面综合感知和理解用户情感状态,是实现智能化、拟人化的人机交互系统的关键,更是实现“人工智障”到“人工智能”蜕变的关键,为用户提供个性化、舒适贴心的情感交流服务,正创新引领未来,改变人类生活。目前,通用的多模态融合理论不能有效解决不同模态情感贡献度不同的问题以及无法有效应对多种模态扩展的问题,从而引入大量来自低贡献度模态的冗余信息以及模型参数量和计算量,影响模型的识别性能与泛化。本报告将介绍基于辅助融合策略的多模态情感信息融合新方式,为不同情感贡献度的模态提供有效的融合方式以及高效的扩展方式,为多模态情感计算研究提供新思路,并在精神状态评估等医疗领域开展应用示范。
讲者:张通博士,现任华南理工大学计算机科学与工程学院副院长,教授,博士生导师,国家优秀青年科学基金和广东省杰出青年基金获得者。主要从事情感计算和大模型等人工智能基础算法及相关应用研究,主持国家自然科学基金,广东省自然科学基金和与企业合作项目20余项,发表学术文章100余篇。担任IEEE Transactions on Affective Computing,IEEE Transactions on Computational Social Systems和Journal of Intelligent Manufacturing的期刊副编。
青年科学家报告专题三

伍冬睿 华中科技大学
题目:情感计算中的主动学习
时间:7月20日 15:00-15:30
摘要:因为情绪的微妙性、不确定性和多样性,情绪标注费时费力,影响了情感计算中情绪识别模型的准确性。主动学习研究如何从大量无标注数据中选择少量进行标注、以最大限度提高训练出的机器学习模型性能,非常适合情感计算应用。本报告将汇报情绪识别中的主动学习研究进展。
讲者:伍冬睿,华中科技大学人工智能与自动化学院教授、博导、院长助理,图像信息处理与智能控制教育部重点实验室副主任, IEEE Fellow,IEEE模糊系统汇刊 (IF=11.9) 主编。主要研究方向为脑机接口、机器学习等。发表《国家科学评论》、IEEE TPAMI、Proceedings of the IEEE等SCI论文100余篇,ESI高引13篇,谷歌学术总引用13000余次(H=61)。授权国际专利5项,中国发明专利13项,转让4项。两个一作算法进入MATLAB Fuzzy Logic Toolbox。获教育部青年科学奖、中国自动化学会青年科学家奖和自然科学一等奖 (1/5)、IEEE SMCS首届青年科学家奖等, IEEE 神经系统与康复工程汇刊最佳论文奖、IEEE 模糊系统汇刊杰出论文奖、IEEE 计算智能学会杰出博士论文奖等6个杰出论文奖,2021-2022蝉联基金委信息科学部、中国电子学会和清华大学共同举办的中国脑机接口比赛技术赛全国总冠军。
青年科学家报告专题四

刘鹏飞 上海交通大学
题目: 大模型的对齐和安全
时间:7月21日 10:30-11:00
摘要:随着生成式人工智能技术的快速发展,确保大模型与人类价值(意图)对齐(Alignment)已经成为行业的重要挑战。本报告将分享大模型价值对齐的必要性、基本方法和挑战,以及我们最新的一些研究进展。
讲者:刘鹏飞,上海交通大学副教授,生成式人工智能研究组负责人,担任交大国智班班主任, 开设“大语言模型”本科生课程。入选国家高层次青年人才计划(2023,海外),上海市领军人才 (海外青年);在自然语言处理和人工智能领域发表学术论文 90 余篇。谷歌学术引用12000 余次。ACL会议史上首次实现连续两年获得System & Demo Paper Award。提出的“少即是多”的大模型对齐思想已经成为包括Google Gemini,Meta LLaMa等业界大模型训练使用标准。
青年科学家报告专题五

陈旭 中国人民大学
题目:基于大语言模型智能体的用户行为和情感模拟
时间:7月21日 11:00-11:30
摘要:在本次报告中,汇报者将从LLM-based Agent的角度分享如何利用智能体来模拟网络用户的行为和情感,并介绍其团队研发的基于大语言模型的用户行为模拟智能体RecAgent。该工作模拟了用户在推荐系统,社交网络中的多种行为以及对不同电影的情感和观点,每个用户是一个Agent,不同Agents可以在模拟环境中自由对话,发帖,搜索,自我进化等。汇报者将详细介绍RecAgent的设计初衷、结构特点、使用方法以及实验评测等。最后,汇报者将介绍RecAgent对未来Human-centered AI领域的潜在影响。
讲者:陈旭,博士毕业于清华大学,目前在高瓴人工智能学院工作,曾在计算机领域顶级会议 SIGIR,TheWebConf 等发表多篇论文,担任顶会 ICML,NeuRIPS,SIGIR等的审稿人,目前他的研究方向是大语言模型和推荐系统。
青年科学家报告专题六

许小可 北京师范大学
题目:智能媒体时代重大突发公共事件的情感计算与风险感知
时间:7月21日 11:30-12:00
摘要:重大突发公共事件分为四类:自然灾害、事故灾难、公共卫生事件、社会安全事件。随着大数据和人工智能崛起,信息传播又进入万物皆媒、人机共生、算法当道的智能传播时代,重大突发公共事件的社交媒体环境中情感计算、风险感知与综合治理面临新挑战。以公共卫生事件为例,通过收集和编码大规模结构化重大传染病病例的多种社交网络平台大数据,可构建病毒多尺度传播网络,从而进行新发重大传染病的传播分析、预警与应对,分析个体、家庭、社区和城市四个尺度上传染病疫情的网络传播动力学。本研究框架可拓展智能化情感计算与风险感知等先进手段在重大突发公共事件如事故灾难中的实际应用,助推线上线下空间综合治理体系的现代化进程。
讲者: 许小可,北京师范大学新闻传播学院/珠海校区计算传播学研究中心教授、博士生导师。主要研究方向为:智能宣传,社交网络分析、计算传播学等。先后主持多项国家自然科学项目基金,腾讯犀牛鸟科研基金等项目,已在Science、Nature Human Behaviors、PNAS、Nature Communications等知名期刊发表SCI论文百余篇。个人学术专著《网络零模型构造及应用》,获国家科学技术学术著作出版基金资助。担任买球的app官网App下载社会媒体处理专业委员会常务委员、中国工业与应用数学学会复杂网络专业委员会委员、中国人工智能学会社会计算与社会智能专委会委员。