高速公路行驶的货车,由于防护不齐或其他因素,导致遗落一些抛洒物,可能导致二次事故的发生。
当抛洒物造成交通事故时,迫切需要追踪到遗落抛洒物的车辆,进而可以提交高速交警进行追责,减轻路段公司的责任问题,降低经济损失。
核心需求:如何利用外场监控摄像机数据精准定位抛洒物的车辆,或者用捡拾人员拍的照片,以图搜图(路段各系统的图+视频)的方式找到抛洒嫌疑车辆。
基于目前门架的车牌识别摄像机,对货车进行货物识别。
当监控人员录入抛洒物类型(或提供以图搜图),系统自动将一段时间内的嫌疑车辆自动筛选出来,提供给监控人员判定,后期可以通过AI算法,提高定位车辆准确性。
门架车牌识别摄像机的部署如下图:
架构:按照三层架构设计,系统由前端前端摄像机、跟踪分析平台、中心软件平台三级平台组成;
平台部署:提供一套抛洒物车辆跟踪分析平台,部署于集团监控中心或高速分公司监控中心,平台内置对应AI识别算法,支持对前端卡口相机完成抛洒物检测与车辆跟踪、检索、取证等功能;
视频接入:平台支持按照国标28181、RTSP/RTMP及Onvif标准协议接入前端相机,实现视频在线管理;
算法分析:算法的主要识别目标为车辆与抛洒物,设计、开发6类算法,支持GPU如3090卡、T4卡硬件平台环境部署,算法支持本地导入上传至智能分析平台;
软件平台:支持算法管理、事件检索、事件人工复核、事件运维等功能,并支持以API或SDK对接高速集团既有业务平台,预留接口对接交管平台,共享取证相关数据:车辆车牌与车型、车辆时空信息、抛洒物事件/视频、抛洒物类型等。
抛洒物检测与分类:基于检测+分类模型,可实现抛洒物的检出与分类;
基于车辆检测、跟踪、OCR等模型,可实现车辆画像的检测分析;
事件信息融合:基于抛洒物的检出与分类事件,选取事件发生前后帧视频的车辆抓拍识别结果(1-3张图片,及1段10-20s事件视频),绑定车辆画像与抛洒物事件,供平台作事件的检索与车辆的跟踪。
主要利用先进的人工智能技术与大数据挖掘。针对抛洒物车辆的的预测和追踪,设计了一套整体的框架,流程图如下:
内置解码抽帧等视频流处理模块,支持多数据来源的接入。
流媒体支持:RTSP/RTMP等流媒体协议。
视频设备:国标平台,海康,大华,ONVIF,可分级管理设备。
视频文件:支持上传多格式视频文件进行分析。
图片文件:支持批量上传图片文件进行分析。
多通道多画面预览窗口,切换通道布局,可查看交通事件数据及布控预警信息。
多通道切换:可切换接入视频源,可多路视频同时预览。
实时结果预览:实时展现各路视频源的结构化数据,包括快照及关联的任务信息。
实时预警:根据预先配置好的布控预警,显示捕捉到的预警快照及相关信息,可查看回溯视频。
根据不同场景,不同区域特征,给不同视频通道配置不同分析任务,关联相应模型。
新增任务:结合算法模型能力,新增可解决对应问题的任务类型。
配置任务:给各区域各视角下的不同设备配置AI技能,支持分时段按需抽帧,减少不必要图片上传,支持同一画面多个分析区域配置。
检索任务:任务列表按时间展现,可按设备及任务类型检索。
根据不同场景,不同区域特征,给不同视频通道绘制不同检测规则。
ROI绘制:支持在隧道、高速路等场景下为人车等目标绘制检测区域、车道线、行驶方向等规则,以保证事件识别准确率与事件检出率。
多维参数配置:支持为抛洒物检测、抛洒物类型、车牌识别、车辆属性分析提供视频帧数、置信度等参数配置。
多维度精细化智能检索,亿级数据秒级响应,便于快速定位感兴趣目标。
按目标类型、特征检索:配置检索条件,如抛洒物类型、车辆、行人、非机动车等目标均可关联特征属性检索,也可设置检索时间周期。
按抛洒物事件检索:按照通道、区域、事件、时间等进行检索,并关联前后10S视频, 便于回溯并还原出现场真实动态。
按图片进行检索:支持上传图片以图搜图,快照以图搜图,快速检索出系统结构化数据。
将所有视频通道、所有任务类别的结构化数据进行集中展现,可导出数据文件。
统计汇总:支持按照事件类型、视频通道,统计交通事件识别结果数据进行集中展现,采用柱状图、饼状图及表格导出等方式呈现。
统计报表:可自定义需要查询的开始/结束时间,以及需要查询的视频通道、区域、车道等条件进行查询事件数量。
模型插件化封装,对事件算法模型按能力进行信息及文件导入、验证、上架、更新等管理。
模型导入:模型文件,模型信息,模型版本,模型描述等内容导入。
模型列表:模型列表展示,模型类别及状态一目了然,便于查看及管理。
模型升级:模型上架和升级简易便捷,模型内容与任务管理联动。
(大家有实现类似系统功能的吗?欢迎在留言区进行留言。)