首届CJE前沿学术沙龙在深圳成功举办

2025年2月22日，中国电子学会旗舰英文期刊Chinese Journal of Electronics品牌学术活动“CJE前沿学术沙龙”（以下简称“沙龙”）在深圳理工大学成功举办。本次沙龙以“DeepSeek视角下的多模态大模型前瞻”为主题，由CJE“多媒体、计算机视觉、图形学和人工智能”领域编委、北京大学彭宇新教授担任主席，邀请人工智能领域多位专家对DeepSeek的核心创新和多模态大模型的前沿进展进行研讨，聚合学术界和产业界观点，以开放的态度、开源的路线，促进人工智能领域前沿学术交流。沙龙由彭宇新教授和深圳理工大学唐继军教授共同主持，CJE副主编、深圳理工大学潘毅教授出席会议。深圳理工大学党委书记朱迪俭致辞，并介绍了深圳理工大学在培养计算机科学技术创新人才方面的办学特色。沙龙吸引了来自学术界与产业界的150余名专家、学者及行业人士参与。

特邀报告

CJE领域编委、北京大学彭宇新教授分享了题为“细粒度多模态大模型”的报告，首先介绍了真实世界的细粒度、多模态两大特性，然后系统介绍了DeepSeek系列大模型的核心技术，并指出DeepSeek模型仍然缺乏细粒度感知能力、历史记忆能力和跨模态生成能力。针对上述局限性，彭宇新教授重点介绍了团队在细粒度多模态大模型方向的最新研究进展，包括团队最新研发并开源的细粒度多模态大模型Finedefics、细粒度多模态多轮交互检索的目标商品推荐以及文本引导的可控视觉内容生成。最后，彭宇新教授介绍了团队研究成果在多家头部企业的应用情况，包括文生视频、广告海报自动生成、自动驾驶、商品推荐等，并对细粒度多模态大模型的未来研究进行展望，推动其在更多场景中的创新应用。

清华大学鲁继文教授在“可通用全模态大模型”为题的报告中强调智能时代的重要标志是大模型技术。大模型在内容生成、内容分析、内容推理等应用广泛，以此为代表的人工智能新型基础性技术，代表着社会生产方式的重大转变，引发工作模式和诸多领域的变革。语言大模型、视觉大模型、全模态大模型是鲁教授分析的重点。受语言大模型取得成功应用的启发，研制视觉大模型可进一步拓展大模型技术的应用边界。多模态基座大模型是众多研究机构和各大公司的热点。全模态视觉模型通过建模外部世界的演化规律，未来将在自动驾驶、具身智能等场景中发挥更大的作用。

哈尔滨工业大学（深圳）教授、鹏城实验室智能部视觉所王耀威所长在“资源受限下的模型创新之路：DeepSeek的启示和鹏城系列基础模型应用实践”为题的报告中指出大模型的开源可以快速催生出上下游生态，极大促进产业发展，影响整体社会对未来的预期。目前全球已有超过百家平台接入DeepSeek，覆盖云服务、网络安全、金融、汽车、高校科研等多个领域，引发了部署适配热潮。DeepSeek-R1创新采用基于大规模强化学习的推理技术路线，从开源角度破局，盘活了国内的人工智能生态。依托鹏城系列基础模型，研发的产业赋能平台，首次实现了基于国产平台的全流程模型自动化生产与跨平台部署，解决了人工智能规模化产业应用工程技术难题，未来将在资源受限条件下，坚定不移走系统创新、持续创新之路。

南开大学程明明教授在“高效能个性化图像生成”为题的报告中，从当前多个重要开源趋势的话题切入，对定制化文生图做了详细介绍。算法流程引发了在场科研人员的很大兴趣。以老照片乃至艺术作品中的人物带入现实生活为例，程教授认为图像生成方式将有可能通过文化行业和产业，令算法的生成技术走进广大用户。应用的广阔性，建立在图像生成的两大核心，算法高效能和个性化信息表征。程教授介绍，基于一致图像生成连接视频，难点在于建模和预测大幅度的动作。人工智能生成内容（AIGC）有望极大地解放生产力，会给社会治理带来更多值得进一步深入研究的课题。

复旦大学邱锡鹏教授在“大模型深度推理技术”的报告中强调“有限算力+算法创新”发展模式是突破算力限制的关键，未来应聚焦高效模式，围绕新型高效模型架构、高效强化学习、高效算力利用开展研究，进一步提升模型推理能力和推广以通用大模型为中心的智能体是未来通用人工智能通用性的发展方向。邱教授介绍了以强化学习为核心的推理模型，指出Deepseek-R1大幅优化模型效率，降低训练和推理成本，是目前唯一同时具有强推理能力和联网搜索的产品，已经初步具备调研较复杂信息并进行回答的能力。

圆桌讨论

在圆桌讨论环节，CJE领域编委、北京大学彭宇新教授与清华大学鲁继文教授、哈尔滨工业大学（深圳）教授、鹏城实验室智能部视觉所王耀威所长、南开大学程明明教授、中山大学操晓春教授、复旦大学邱锡鹏教授就与会者关心的科研问题进行了深入回应，并围绕以下三个方面展开了热烈讨论。

1、高成本的多模态大模型如何在保持性能的情况下降低开销。专家们分享了增强算力和降低成本的科研思路。

2、人工智能领域的理论创新与工程创新并重。与会专家一致认为，学术理论与工程实践要双轨并进，尤其是在底层优化设计方面，工程实践能力对于即将进入科研领域的青年学者至关重要，是推动技术落地和实际应用的关键环节。

3、大模型的研究范式尚未达成统一共识，未来前景广阔。专家们指出，尽管大模型的研究仍面临许多待解决的问题，但其发展潜力巨大。与此同时，生物层级中人类推理的能量消耗较低，为我们在推理智慧上的进一步思考提供了借鉴。

圆桌讨论环节的提问气氛异常热烈，参与者们纷纷踊跃提问，专家们也耐心地逐一回应。在讨论过程中，尽管时间已多次延长，提问的热情依旧高涨，充分展示了与会者对相关议题的浓厚兴趣。这些讨论不仅展现了当前科研的热点问题，也为未来的研究方向和学术创新提供了宝贵的启示。

未来展望

本次沙龙是CJE前沿学术沙龙系列学术活动的首场活动。未来，沙龙将继续聚焦学科前沿，秉承交流最新科研成果的宗旨，致力于在交流中汇聚创新、凝聚共识、集聚思考。在此过程中，我们将搭建更高水平的学术交流平台，助力攻克技术难题，集聚专家学者智慧。

让我们共同期待下一次的精彩活动！