其他
【视频行为分析引擎】华宇创新技术成果第2期 | TECH ZONE
华宇深耕法律科技多年,在形成自身完备的技术体系的同时,培养出一大批勇于创新的技术工程师,TA们乘风破浪,厚积薄发,“技”往开来。在这里,我们将开创一片TECH ZONE,陆续呈现TA们在工作中的创新技术成果,敬请关注。
视频:华宇解读视频行为分析引擎
部分视频素材来源于网络
系统主要算法和模型
华宇研发的视频行为分析引擎,从摄像头帧流中实时读取一段视频流,经过人体关键点检测网络、动作识别深度卷积网络,实现了人体姿态检测和动作识别,结合目标检测网络,完成特定目标的检测(如香烟,手机等)。主要过程如图1所示:
图1:主要过程
结合实际场景行为定义策略,完成特定场景的异常行为检测与预警,如图2所示,人体关键点显示以及行为分析结果如下:
图2 :人体姿态检测与动作识别
主要功能与应用领域
视频行为分析引擎目前支持的行为分析包括抽烟、玩手机、打电话、攀高、下蹲、站立、举手、走动、坐着、冲突、跌倒、谈话等共计12类,实际场景检测效果如图3所示。
图3 :实际场景视频行为分析
在人体检测、人体关键点检测、动作识别的基础上,还可以完成距离过近、单人看护与无人看护、区域闯入、人员滞留检测、离开区域、人员聚集等异常行为检测与预警。
司法视频行为分析引擎主要可以完成监管、询问、讯问、留置、监舍、戒毒、重点区域等场所中的危险动作、异常行为的自动识别、监测与预警等,提高这些监管和讯问场所的规范化管理,减少人工实时监测和后期视频复查的工作量。
未来,视频行为分析引擎还可以扩展到邮政或快递的暴力分拣、校园欺凌以及危险行为检测等领域。
华宇创新技术成果(2020)系列
点击下方“阅读原文” 了解华宇法律科技十大技术