AI钱塘论坛（第30期）
主题：AI 端侧多模态监测预警大模型研究与开发
时间：2025年9月16日14：30-15：30
地点：科技馆5楼会议室
主持人：颜成钢、张继勇
张冠华博士
1975年生，博士毕业于上海交通大学计算机学院，拥有20余年人工智能和边缘计算的研发与产业经验，获得10余项美国发明授权专利和20余项中国发明授权专利，涵盖多模态融合感知、边缘神经网络压缩、工业事件识别与智能预警等技术方向等。在科研与产业结合方面，主持与参与了十余项国家级与省部级科研项目，包括多层级软件定义智能汽车、脑机接口、北斗智能监管平台、城市应急感知系统、AI+农业与环境监测系统等。其中主导开发了的上海海事局“端侧多模态监测预警大模型”关键技术体系，推进其在高危工业场景中的实际部署与产业转化。
报告摘要：针对当前工业安全监测中普遍存在的“人工巡检效率低、云端响应迟滞、数据合规风险高”等核心问题，旨在构建一个基于端侧多模态融合技术的实时监测与智能预警系统。提供了具备高实时性、高适应性与高可部署性的系统性解决方案。系统集成可见光、红外、毫米波雷达与环境传感器，实现多源异构数据的同步采集与全域感知，并基于轻量化神经网络模型，在本地完成融合推理与风险识别。结合插件化算法架构与边缘合规处理机制，系统可在弱网或断网条件下独立运行、快速响应，实现事件驱动的声光报警与联动控制，并符合高风险行业在数据隐私与监管方面的严格要求。技术路径上，项目采用剪枝、量化、知识蒸馏等深度模型压缩方法，使模型可部署于低功耗边缘芯片；在系统架构上，构建了可热插拔的算法模型库和可适配多类硬件平台的推理引擎，显著增强了系统的灵活性与扩展性。该系统已在化工园区、能源设施、港口卡口等典型高危场景完成多轮部署验证，在复杂物理空间中表现出卓越的环境适应性与工程稳定性。研究成果展现了人工智能技术在工业智能化感知、现场安全治理与合规控制方面的融合创新潜力，为构建面向未来的工业安全管理体系提供了有力支撑。