浅析基于视频图像的智能分析网关AI算法及场景应用

Posted 2022-09-02 TSINGSEE

目前在视频监控领域应用较为广泛的AI技术有：智能检测与分析技术（人脸检测与识别、物体识别、行为识别、目标追踪等）、图像及视频处理技术（视频图像处理、视频结构化等）。在场景上，视频监控的应用范围也在逐步扩展，从之前的安防逐渐拓展到交通、旅游、金融、司法、教育、生产制造、城市管理、环保等更多领域，例如：生产车间的质检智能检测、旅游景区客流分析、城市管理中的AI人脸检测、公安部人脸识别系统等等，无一不和AI相关。

一、介绍

智能分析网关是由TSINGSEE青犀视频研发的智能硬件产品，可支持AI视频智能分析功能，通过对视频监控场景中的人脸、人体、安全帽、口罩等进行抓拍、检测与识别，对异常情况进行智能提醒和通知，可广泛应用于客流统计、安防监控、周界防范、企业安全生产、公共防疫等场景。

智能分析网关针对行业视频智能分析需求，可提供丰富、完善、专业的平台功能，满足用户的多样化、个性化、场景化方案需求。利用AI、物联网、云计算、大数据等技术，可满足基于视频服务的数据感知、智能检测、智能分析、智能告警等需求。

二、功能

1、口罩佩戴检测

利用口罩特征分析算法，对监控区域内的人员是否佩戴口罩进行实时检测，如餐饮后厨、工厂车间、公共场合防疫等，可根据业务需求对未正常佩戴的情况进行自动告警提示，并截取图片进行保存。

2、安全帽检测

通过实时视频监测和预警在岗工人是否正确佩戴安全帽，若检测到异常，则立即向平台发出告警，支持语音联动、声光装置进行提醒。

3、人体检测

基于AI算法，可对监控场景中是否存在行人进行检测，并给予精确定位、追踪，可实现人群流量统计、行人追踪、定位等功能，具有广泛的应用场景，如：行人闯入检测、越界检测、人群密集检测等。

4、区域入侵检测

利用AI深度学习算法，对设定的监控区域进行入侵实时监测，当视频画面中的指定区域检测到人员，则进行入侵报警，并抓拍图片，上传至平台，平台则可以将告警信息通过消息、语音等方式发送给相关管理人员。

5、算法扩展

可针对多元化应用场景进一步拓展更多AI算法。

6、数据感知

基于RTSP/ONVIF协议，将分散在各现场的设备统一接入，基于视频图像实现数据感知、智能检测与识别、分发等服务。

1）RTSP/ONVIF协议接入

轻量化接入、传输、处理与分发能力，支持RTSP / ONVIF协议接入设备，支持接入多路高清视频流，支持分发RTSP / RTMP / FLV / HLS / WebRTC视频流格式。

2）支持上行级联

提供RTMP、CDN推流、GB28181国标级联能力。

3）实时高清视频直播，覆盖全终端

支持实时传输720P和1080P的高清视频，可实现远程PC端（Windows / Mac / Linux）、手机端（android / ios）、微信端及电子大屏观看，可满足用户的多样化场景需求。支持PTZ云台控制，包括焦距缩放、方向控制等。

4）对接各类传感器

支持对接各类传感器，如温湿度传感器、烟感、水浸等传感器，实现数据智能化感知。

7、智能告警

可对前端设备上传的检测异常情况进行告警，如视频信号丢失、遮挡、危险区域闯入、周界入侵、未正确佩戴安全帽、未佩戴口罩等，并可联动声光及语音装置进行提醒。告警消息可通过语音、短信、消息通知、微信等方式推送给工作人员。

8、数据分析

设备采集的数据经AI智能检测分析后，在平台直观展示智能识别的人、物体、行为等违规行为和结果，打造可视化、综合化、智慧化的数据融合分析、管理与展示平台。

• 人体检测数据实时分析，如：人流量统计；
• 设备接入状况、运行、宽带、存储空间等状态监测信息；
• 常告警信息提示，如：入侵、安全帽未戴、口罩未戴等。

平台还可展现设备接入状况、运行、宽带、存储空间等状态监测，设备监控画面、告警上报等信息。

9、灵活拓展

平台部署简单、功能可灵活拓展、轻松与第三方集成：

• 支持自定义各类软件程序，通过应用管理，自定义各类App；
• 支持开发语言：Java、C&C++、Go、Lua、Python、.NET等；
• 提供JDK环境、Docker环境、Python环境等，到手即可对接。

三、应用场景

1）AI安监

可用于工厂、工地等安全生产监管场景中，如：化工厂、烟花爆竹厂、重点危化企业、建筑工地等，实时监测人员口罩佩戴、安全帽佩戴、危险区域闯入等，减少工地安全隐患，保障安全生产。

2）区域安全

监测保密区域、危险区域、重点区域是否有人员进入，可保障财产安全、生产安全等，可应用在变电站、电厂、水厂、工厂、工业重地、工矿企业、物资仓库、住宅小区、学校、机场、水产养殖及畜牧场所、政府机构、重点文物场所、军事设施、监狱、看守所等。

3）公共防疫

协助公共区域防疫工作的开展，实时监测区域内人员是否佩戴口罩，并可结合语音装置发出提醒，可应用于楼宇、商场、车站、公交、出租车、地铁、广场、景区、工厂、园区等场景。

4）在岗离岗

检测固定工作岗位上是否有人员在岗，在需要人员时刻在岗的场景中应用意义重大，如：工地、煤矿、电力等。

5）智慧校园

可用于校园安全管理，包括周界防范、危险区域是否有人员靠近、闯入、翻越围墙、人员异常聚集等检测。

6）智慧园区

可应用于工业园区、物流仓库等场所的周界安全防范、检测是否佩戴口罩等防疫场景中。

7）智慧社区

可用于社区物业管理，例如小区周界防范、危险区域，如：供电房等是否有人员靠近等检测。

8）智慧楼宇

可应用于写字楼、商场、大厦等场所的人流量统计、公共空间电力节能、楼宇安防等场景中，打造楼宇的智能、高效、精细管理，更好地服务用户。

9）智慧景区

可用于景区人流量统计、人群拥挤预警监测、游客靠近危险区域等安防监控场景，可联动语音进行驱离提醒。

10）医疗/卫生

适用于医疗、食品卫生、餐饮等场景的口罩佩戴识别，有效监管医疗卫生水平、保障食品生产的安全与卫生，以及餐饮行业的卫生监管。

11）无人值守

可用于野外监控场景，如：变电站，水利设施等，防范可疑人员靠近、危险区域闯入、人员破坏、偷盗等。

TSINGSEE青犀视频正在积极探索基于AI、边缘计算、大数据、5G等新兴技术的企业发展战略，并进一步形成多元化的产品和业务布局，为用户提供更丰富、便捷、智能的产品服务。