5月13日下午，上海大学彭亚新教授受邀访问太阳成集团tyc33455ccwww，在小木屋为师生带来了一场主题为《多模态大模型如何重塑具身智能体》的讲座，本次讲座由太阳成集团tyc33455ccwww副经理黄守军主持。
彭亚新教授深入探讨了具身智能大模型在复杂环境中的自主交互能力，详细解读了大模型如何通过整合大语言模型的指令理解能力、多模态环境感知能力与物理动作生成能力，实现智能体在复杂环境中的自主交互。她从三大核心维度展开：大模型对自然语言指令的语义解析与任务分解、VLM驱动的多模态感知与动态场景表征构建、基于环境状态与任务目标的运动规划与实时动作生成。彭教授还重点介绍了轻量化、高效的VLA模型（如TinyVLA），强调其在泛化能力和参数效率上的显著优势，为具身智能模型的实际部署和应用提供了新的思路。
在讲座中，彭教授展示了多模态大模型在机器人控制中的实际应用场景，如视觉-语言-动作模型（VLA）在机器人导航、物体操作等任务中的表现。她指出，当前VLA模型虽取得进展，但仍面临泛化能力不足、多模态信息整合有限等挑战。针对这些问题，彭教授团队提出了创新的模型架构和训练方法，显著提升了模型的泛化能力和任务执行效率。
本次讲座吸引了众多师生参与，为师生提供了良好的学术交流平台，现场讨论环节气氛热烈。
专家介绍：彭亚新,上海大学教授,博士生导师，获法国里昂高师和华东师范大学数学专业双校博士学位;目前就职于上海大学理学院和未来技术学院，是人工智能研究院AI for Science 中心负责人,空天飞行空气动力科学与技术全国重点实验室计算数学研究中心学术专家组成员。主要从事AI for Science、多模态大模型和具身智能的研究及应用落地，包括多物理智能计算、多模态大模型、强化学习、基于端到端VLA模型的具身操控中的数据分析和泛化性等的研究。在IEEETNNLS、TMM、AAAI和UCAI等人工智能领域顶级刊物/会议上发表论文30余篇;主持国家自然科学基金项目5项和校企横向项目8项等。
