一、场景概述
某一线城市12345公共服务平台智能化升级项目,基于商汤日日新SenseNova多模态大模型能力构建,面向全市政务服务热线、城市治理、交通管理等公共场景,提供智能化的工单分拨、视频检索、事件分析等全链条支持。平台于2024年基于"日日新5.5"大模型体系完成架构升级,推出"方舟多模态新智平台"解决方案,覆盖城市服务、交通管理、应急响应等核心业务场景,日均处理市民诉求超过1万次,管理前端视频点位超过10万路。平台深度整合商汤的视觉大模型与语言大模型能力,在工单智能分拨、视频语义检索、城市事件分析等场景实现规模化应用,成为智慧城市大模型落地的标杆项目。
二、核心痛点
工单分拨效率低下: 传统12345热线工单依赖人工分类分拨,面对海量市民诉求,分拨员工作量大、响应慢,分类标准难以统一,工单流转周期长,影响市民服务体验。
视频检索方式单一: 城市视频监控点位超过10万路,传统检索依赖时间、点位等结构化标签,无法基于事件内容、物体特征进行语义化检索,查找特定场景耗时耗力。
复杂场景误报率高: 传统视觉AI模型在复杂城市场景下误报率高,需要大量定制研发投入,模型泛化能力不足,难以应对城市治理中千变万化的实际场景。
交互方式不够智能: 传统智慧城市系统依赖固定菜单和预设指令,无法通过自然语言进行灵活交互,使用门槛高,难以满足城市管理者灵活多变的信息查询需求。
应急响应速度慢: 台风、暴雨等突发事件后,需要快速识别树木倒伏、道路积水等安全隐患,传统人工巡检模式响应慢,难以支撑快速决策。
三、解决方案
基于商汤日日新SenseNova多模态大模型构建城市公共服务平台,提供全链条智能化支持:
智能工单分拨系统: 利用日日新大模型的语言理解能力,构建AI智能体实现工单自动分类分拨。系统可理解市民诉求的自然语言描述,自动识别问题类型、责任部门、紧急程度,实现工单的智能分拨与流转。
视频语义检索平台: 依托多模态大模型的视图语义理解能力,实现图文资源的智能语义化检索。城市管理者可通过自然语言描述(如”查找昨天树木倒伏的场景”)快速检索相关视频片段,实现”所说即所得”的检索体验。
城市事件智能分析: 基于视觉-语言多模态大模型,对城市监控视频进行实时智能分析,自动识别交通拥堵、违规停车、安全隐患等事件。系统支持通过简单提示词快速创建新场景分析功能,实现模型快速迭代。
对话式智能研判: 构建可理解并处理多种业务的AI智能体,实现”需求即指令”的自然语言交互。用户可直接通过自然语言提问,大模型理解意图后调取相应信息并给出分析结果。
应急事件快速响应: 在台风、暴雨等突发事件后,通过对话式检索快速定位树木倒伏、电线杆倾倒等危害交通安全的场景,辅助城市管理者快速响应处置。
物流运力智能分析: 在交通运输场景,构建物流运力分析智能体,提取车辆位置、车流状况、天气等信息,制定科学合理的物流车辆运输时空图谱。
四、实施成效
工单分拨效率大幅提升: 12345工单分类分拨速度提升至原先的10倍以上,单个分拨员原本一个月的工作量现在仅需一天即可完成。在短短一个月内,完成超过30万次分拨诉求,平均每天处理一万余次。
分拨准确率显著改善: 经二次复核,智能分拨准确率高达90%以上,统一了分类标准,减少了人工分拨的主观差异,提升了政务服务质量。
视频检索效率飞跃: 支持自然语言调取10万路以上前端点位,实现分钟级精准检索,改变了传统依赖时间、点位标签的检索方式,大幅提升视频资源利用效率。
场景部署速度加快: 升级后的模型架构支持通过简单提示词即刻创建全新场景分析功能,实现1天内快速部署上线,3天内手动快速调优,部分场景通过二次分析后准确率达90%以上。
应急响应能力增强: 台风等突发事件后,城市管理者可通过对话即刻检索出树木倒伏、电线杆倾倒等危害交通安全的场景,响应时间从天级缩短至分钟级。
政务工作压力减轻: 智能化分拨应用切实有效,极大减轻了政务工作压力,显著提升工作效率,让城市管理者将更多精力投入决策与服务。
五、关键成功因素
1. <strong>多模态技术融合:</strong> 商汤将视觉领域深厚算法积累与日日新领先大模型能力深度融合,采用视觉-语言多模态大模型架构,集图文对比、文本理解生成及交错图文理解三大能力为一体,为城市AI应用创新提供全方位技术支撑。
2. <strong>AI智能体架构:</strong> 通过Agent技术构建可理解并处理多种业务的AI智能体,实现需求描述向具象指令的高效转化,让用户获得"所说即所得"、"所问即所应"的自然交互体验。
3. <strong>国产自主可控:</strong> 方舟多模态新智平台充分适配主流国产芯片和硬件服务器,满足智慧城市领域对自主可控的政策要求,为大模型国产化落地提供全面算力保障。
4. <strong>提示工程创新:</strong> 创新性配套图文可视化的提示工程设计,兼顾方案落地的泛化性及系统应用的低门槛,无需海量定制研发投入,仅需少量正负样例数据和提示词调整即可快速生成模型。
5. <strong>灵活可配的业务应用:</strong> 针对城市场景复杂性高、碎片化强的特点,平台能根据智慧城市的具体需求进行高度定制化开发,有效保障AI大模型的落地效果。
6. <strong>全栈算力支撑:</strong> 商汤自建上海临港AIDC人工智能计算中心,算力规模在国内处于领先地位,为大模型训练、推理和持续迭代提供强大的算力基础设施支撑。
六、配图方案
| 配图位置 | 配图内容 | 配图说明 |
|---|---|---|
| 封面图 | 平台架构全景 | 展示方舟多模态新智平台的整体架构,包括日日新大模型底座、智能体层、业务应用层等模块 |
| 痛点图 | 传统城市服务困境 | 展示人工分拨效率低、视频检索难、复杂场景误报高等传统模式痛点 |
| 方案图 | 智能工单分拨界面 | 展示日日新大模型驱动的工单智能分拨界面,包括自然语言理解、自动分类等功能 |
| 成效图 | 关键指标对比 | 用图表展示工单分拨速度、准确率、视频检索效率等核心指标的提升幅度 |
| 场景图 | 多场景应用展示 | 展示12345热线、交通监控、应急响应、物流分析等典型应用场景 |
| 架构图 | 多模态技术架构 | 展示视觉-语言多模态大模型架构,包括图文对比、文本理解、交错图文理解等能力 |
七、分类标签
行业领域: 智慧城市、政务服务、城市治理、智慧交通、公共管理
技术类型: 多模态大模型、视觉大模型、语言大模型、AI智能体、语义检索
应用场景: 工单分拨、视频检索、事件分析、应急响应、物流调度、智能问答
产品形态: 企业级AI平台、私有化部署、行业解决方案、多模态智能体
目标用户: 城市管理部门、政务服务中心、交通管理局、应急管理部门、城市运营中心
核心能力: 多模态理解、自然语言交互、视频语义检索、智能分拨、场景泛化、提示工程
部署模式: 私有化部署、国产化适配、云边协同、全栈自主可控



