VSI 系统

一、成果简要介绍（含背景、成果概要）

基于目前市场用户对AI技术应用需求的多变性，及AI平台开发的高成本和高工程量问题，数据到应用项目组基于独创的从数据到 AI 应用自动生成技术，研发了多模态AI分析应用自动生成平台-VSI系统。开发AI应用软件自定义功能，将AI垂直应用自动生成关键技术运用到交通、公安、高铁、校园、银行、医疗、居家等行业智慧场景领域中，以“人智＋机智”的交互方式，推动中国视觉智能产业高质量发展。近两年该项产品已申请10余项国内发明专利，获批1项，取得软著22项，项目获得全国颠覆性技术创新优秀项目荣誉。

二、成果介绍

1、所属领域：

智能物联

2、主要应用场景

（1）交通流智能化管理：制定可视化的交通管理智能化解决方案，构建集监测、调度、管控、应急、服务于一体的智慧交通路网管控平台，实现精准高效的交通治理体系建设。

u 高速、城市道路、隧道和桥梁交通监测管理：

·交通运行管理:道路交叉口交通量、车牌/车辆类型、车辆速度、车流密度、车辆位置、车型颜色识别、车辆变道、路口各车道交通量（直行左转右转车辆统计数）、车道数、车辆轨迹、机动车与非机动车识别，过街、等灯人员统计等场景分析。

·交通状态管理：交通事件（拥堵、逆行、违规停车、闯红灯、车外抛洒、撞车事故等）；交通设施设备状态（交通信号灯、标志标牌、摄像头等）、环境因素（积水、起火、道路施工等）等场景分析。

u 地铁列车人流监测管理：地铁上下人流量统计、闸机口人员出入统计、可疑人员追踪等场景分析。

u 客车站人流监测管理：车站进出实时客流统计、特定人员追踪等场景分析。

（2）公安现勘视频智能分析：通过现勘视频分析应用系统，对人像、车辆等海量视频数据进行自动化处理，将信息与案件关联，形成刑事证据链，解决在人工排查过程中漏看、漏排的风险，减少对视频侦查民警的工作压力。

u 现勘视频管理：对接入获取的视频图像数据进行自动分析、识别

u 车辆检测：车牌识别，车辆轨迹跟踪，车辆出现位置、时间、车型、车标、行为等进行分析。

u 人员检测：人脸识别，人员轨迹跟踪，人物特征（性别、年龄段、衣着特征、目标物等），嫌疑人比对确定，异常行为（打架、聚集、拉横幅、跳楼、下跪）等进行分析。

u 图像增强：利用 AI 图像增强技术对视频源进行修复与增强。

u 视频切片：利用视频的切片技术找出关键节点切片图像与数据。

u 同一认定：对视频信息中出现的人员，进行图像的提取并进行身份认定。

 （3）校园安防与课堂精细化管理：制定可视化智慧校园解决方案，构建含校园安全防范、课堂教务管理于一体的智慧化校园管理平台，提高校园的精细化管理与安全防范水平。

u 平安校园监测：学生异常行为识别、区域入侵告警、区域人数统计、校内车辆识别、陌生人识别跟踪、出入校门人员统计等场景分析。

u 课堂智能监测：学生考勤统计、学生课堂行为（阅读、书写、起立、举手、趴桌子睡觉、听讲、玩手机）等场景分析。

（4）银行精准客流智能化管理：以边缘智能赋能银行网点数智转型，基于智慧识别，构建智慧安防、智慧营销等银行业务场景。

u 人员检测：排除重复人员，精准统计客流量。

u 行为分析：识别客户行为，实现智能引导。

u 动态人员在岗检测：识别移动工作人员（例如：大堂经理）是否在岗，实现智能管理。

（5）列车视觉定位：高铁运行中，除通过卫星导航、INS/GNSS组合导航系统、应答器等设备来定位列车外，也可以通过高铁列车视频辅助来定位。将图像识别技术应用于列车自主定位中，自动预测列车位置，大幅减少地面路侧设备，减少定位误差。

3、市场背景及痛点

痛点:目前市场上很多中小企业无法受益于AI,主要体现在：

·模型框架众多、环境搭建困难，开发门槛高；

·AI平台更新受限，用户应用多被大厂家锁定；

·AI平台昂贵，多要求高算力集中部署，少有灵活的单站、多站部署方式。

解决：VSI是介于人工智能产业链基础技术层与应用层之间的技术创新平台，能端到端快速生成用户定制的AI应用，将多源数据进行统一编排处理，满足用户多变性AI业务需求。其主要优点包括：

·项目不需要大量人工投入，低代码或无代码编程，自动化程度很高；

·针对的目标是解决多点问题：单点应用如车牌识别，多点应用如车辆轨迹跟踪（需多种算法组合：车牌识别、车型识别、车辆颜色识别等）。

·对用户场景的算法组合式的分析需求可以快速、优质、低成本满足；

·解决方案生成成本较低，项目研发成本可控且较低；

·软件成本较低，可以为中小企业提供快速、及时的AI解决方案；

·保护用户数据隐私安全。

4、产品或技术成果介绍

多模态AI分析应用自动生成平台-VSI系统，基于容器部署，适用于从端系统到云平台等各种环境，为应用解决方案提供用户编排定制和自动生成功能，具备强大高效的分析能力和有创新意义的跨模型、跨硬件的AI模型和软件生成方法。

基于AI机器学习，VSI具有统一的 LCNC（低代码无代码）框架，无需编码开发，用户可集成视频、摄像头视频流、音频、图像、文本或工业传传感器等输入数据，通过低代码-无代码的图形工具编排各类AI模型，轻松实现用户需求，自动生成AI分析应用，让机器和网络获得智能，让 AI普惠各行各业，让人类获取洞见。

▲VSI系统运作图（以视觉AI为例）

5、核心优势：技术、产品、解决方案及其他方面

VSI 系统是可以多种算法根据用户需求编制的流图（flow graph）执行，可以很容易地生成单点应用，对复杂情况下的分析也能轻松应对。VSI对输入不同类型的多源数据可以做前端融合，也可以单独流水线处理后端融合，可以做多模态、跨模态处理，避免一种数据要一个系统，真正实现用户自编排，数据实时自动分析，高效提质低成本，安全可控的 AI 应用产业化、工程化目标。VSI系统的主要特点包括：

·低代码/无代码：对算力资源充分应用，降低AI应用成本

·应用自动生成：多种模型编排，自动生成复杂AI应用，提供快速、及时的AI解决方案

·无锁定，保护隐私：系统和数据都是用户自己的

·多模态融合：支持多种部署模式，自有模型算法众多且对外部模型开放

▲VSI部署方式

6、技术成熟度及应用情况

数据到应用项目组在产品技术上不断更新，目前已完成3.0版本迭代，开发出100+类算法，提高产品的应用成效，服务智慧城市数据治理大目标，用AI作为底座，完善智能化的不同规模层级的指挥调度系统，推动高质量发展。

项目技术逐渐趋于产业化成熟，目前产品在某省会城市公安刑侦部门及分局、上海某学校平安校园项目、杭州某未来社区违规停车检测、银行网点客流统计、地铁车站人流统计分析、高铁列车车厢乘务、道路和高速公路交通流检测等已经完成特定场景的技术可行性验证，并已经在某省会城市公安部门和上海某学校进行实际商业部署。

三、团队介绍

1、团队负责人介绍

   王勇：北航杭州创新研究院独立PI，北京大学通讯与信息系统博士，正高级高工。《中国铁道学会智能铁路委员会》专家委员，曾任科技部863计划十二五、十三五专家组成员。曾担任贝尔实验室高级研究员，UT斯达康光网络部门系统工程师、高级系统工程师、产品副总监，浙大网新集团副总裁、副总工程师，众合科技副总裁。主持和参与国家级、省市级重大科技项目，项目国拨经费超2.4亿元，个人获国家发明专利7项。

2、成果所在平台及其他团队介绍

平台：数据到应用智能计算体系及平台产业技术项目组

数据到应用项目组由王勇博士创立，主要成员均为名校博士，来自世界顶尖研发机构贝尔实验室，拥有丰富的工业界和学术界经历，聘请世界著名华人 IT 科学家李大维博士为总顾问，浙江省北大信息技术高等研究院研究员谢俊清博士为技术顾问。

团队成员介绍：

   李舒：北航杭州创新研究院高级研究员，中科院计算所计算机组织与系统结构博士。曾担任贝尔实验室高级研究员、朗讯科技无线产品部门研发总监，在高级别学术会议及期刊上发表论文十余篇，获发明专利7项。

   张晶涛：北航杭州创新研究院高级研究员，东北大学控制理论及控制工程博士。曾担任中兴通讯CDMA事业部三级主任工程师，朗讯科技CDMA基站研发部门技术专家（MTS），曾在高级别学术会议及期刊上发表论文十余篇，获得部级科技进步一等奖一次。