新一代VAS基于深度学习目标类型识别的智能视频分析系统
1 系统简介
融合永道VAS智能视频分析系统是一个基于机器视觉深度学习技术并结合GPU图像处理技术开发的新一代智能视频分析系统,具有行业内强大的目标对象分类识别与跟踪的检测能力,并在此基础上开发了一系列的应用规则,使得用户可以根据实际需求采用相应的规则定义与业务应用相对应的功能,同时结合大规模联网与大数据功能,形成分布式架构一体化管理综合管控平台。
2 系统架构
系统网络拓扑图
3 功能说明
3.1 目标对象分类检测
对象类型代码 对象类型名称
aeroplane C飞机
apple H苹果
backpack L背包
banana H香蕉
baseball bat L棒球棒
baseball glove L棒球手套
bear E熊
bed I床
bench I长凳
bicycle B自行车
bird E鸟
boat D船
book L书
bottle L瓶子
bowl L碗
broccoli F西兰花
bus B公共汽车
cake J蛋糕
car B小汽车
carrot F胡萝卜
cat E猫
cell phone L手机
chair I椅子
clock L时钟
cow E奶牛
cup L杯子
diningtable I餐桌
dog E狗
donut J甜甜圈
elephant E大象
fire hydrant I消防栓
fork L餐叉
frisbee L飞盘
giraffe E长颈鹿
hair drier K吹风机
horse E马
hot dog J热狗
keyboard K键盘
kite C风筝
knife L刀
laptop K笔记本电脑
microwave K微波炉
motorbike B摩托车
mouse E老鼠
orange H橙子
oven K烤箱
parking meter K停车收费表
person A人
pizza J披萨
pottedplant F盆栽植物
refrigerator K冰箱
remote Z遥远的
sandwich J三明治
scissors L剪刀
sheep E羊
sink G水池
skateboard L滑板
skis L滑雪板
snowboard L滑雪板
sofa L沙发
spoon L勺子
sports ball L运动球
stop sign G停止标志
suitcase L手提箱
surfboard L冲浪板
teddy bear L泰迪熊
tennis racket L网球拍
tie Z领带
toaster K烤面包机
toilet G厕所
toothbrush L牙刷
traffic light G交通灯
train B火车
truck B卡车
tvmonitor K电视
umbrella L雨伞
vase L花瓶
wine glass L酒杯
zebra E斑马
3.2 视频源接入
支持所有的标准视频媒体格式文件
支持RTSP流媒体格式
支持 海康、大华、雄迈、天视通、海芯威视、智诺、天地伟业、宇视、AXIS、松下等主流私有格式的网络摄像机,同时支持接入相关协议的NVR产品。
支持ONVIF协议的网络摄像机
支持融合永道视频联网平台
3.3 应用规则
3.3.1 拌线规则
本规则在视频内划一条或多条线,检测对象经过线条触发事件。支持对象类型过滤,支持绘制多条线。
应用场景:
l 警戒线
适用于周界入侵等,如只设定行人和车辆或船进入,其它对象或物体自动过滤
l 计数
适用于行人计数或车辆通行计数。
3.3.2 AB线规则
本规则绘制A线和B线,选中A-->B或B-A 确认触发事件,支持对象类型过滤。支持车牌识别。
应用场景:
l 车辆逆行
l 行人逆行
l 计数
3.3.3 区域进入规则
本规则支持在视频内绘制多个布控区域,进入区域的对象则触发报警事件。支持对象类型过滤。可设置联动球机预置位指向布控区域。
应用场景:
l 警戒区
l 禁止大型车驶入
3.3.4 AB区域规则
本规则支持在视频内绘制AB 两个布控区域,设置A->B或B->A顺序进入区域的对象则触发报警事件。支持对象类型过滤。可设置联动球机预置位转向布控区域捕图。
应用场景:
l 逆行
l 十字路口车辆不按方向行驶
l 车辆非法变线
3.3.5 对象滞留规则
本规则支持绘制多个布控区域,当车辆或行人进入区域超过设置的时间(N秒)时,触发报警事件,支持对象类型过滤。可设置联动球机预置位指向布控区域并捕图。支持车牌识别。
应用场景:
l 车辆违章停车
l 行人绯徊
3.3.6人群聚集规则
本规则支持绘制多个布控区域,当行人进入区人数超过设定的数量时,触发报警事件,支持对象类型过滤。可设置联动球机预置位指向布控区域并捕图。
应用场景:
l 重点场所人群聚集
3.3.7车辆拥堵规则
本规则支持绘制多个布控区域,当车辆进入区人数超过设定的数量时,触发报警事件,支持对象类型过滤。可设置联动球机预置位指向布控区域并捕图。
3.3.8哨兵离岗探测规则
本规则支持绘制多个布控区域,当卫兵不在岗,超过设定的时间(N秒)时,触发报警事件,支持对象类型过滤。可设置联动球机预置位指向布控区域并捕图。
3.3.8目标摘要规则
本规则支持探测跟踪视频内的目标对象,并自动提取对象图片信息及颜色信息自动保存到数据库
3.4功能模块
3.4.1 实时预览
3.4.2 记录查询
3.4.3 统计分析
4系统特性
l GPU高速处理,大分辨率支持,支持 CIF-4K各种分辨率图片,支持多个 1080p纵向或横向拼接的视频源图像。
l 视频源接入支持
l 零误报
l 零漏报
l 海量历史数据存储支持
l 支持球机联动协同抓拍
l 支持大型平台联网综合管理