解决方案 | 智慧工地视频AI分析，强化工地安全新防线！-电子发烧友网

方案背景

随着科技的发展和社会的进步，围绕工地安全生产、智能视频监控、人员实名制管理、物料、设备监视、环保等各方面管理问题，迫切需要在建立健全“人防、物防、技防”体系的基础上、进一步集成涉及人、机、料、法、环等系统于一体的综合智慧工地管理云平台，对现场进行一体化、可视化、智慧化管理。

视频监控智能系统一直是工地安全保障系统的重要组成之一，随着科学技术和互联网技术中的信息化、智能化、移动化等最新科技成果逐渐应用到了视频监控系统中，衍生出许多高效、智能的监控方案和智能系统，使得工地综合安全管理工作变得更加全面，工地环境更加具有安全保障。

智慧工地视频AI分析系统

目前，施工工地均已安装视频监控系统，但往往因管理人员不足，不能实时监控多个场景，通常仅发挥着事后监控视频调取与回溯的功能，无法对突发的安全事件进行告警及应急处置，监控效果发挥的作用极弱。

智慧工地AI视频赋能方案面向厂区各个场景，提供包括安全管理、智能监管功能。在安全管理场景，通过视频监管、事件预警、系统对接等赋能使工地安全管理和防护从被动响应、人工处置到智能处理、实时告警，提升了管理效率。

方案介绍

万物纵横推出智慧工地视频AI分析平台解决方案，可作为监控视频数据接入、管理、分发、并发分析处理的中心节点，基于流媒体的架构可有效满足各种场景业务和视频AI算法分析需求，也可以云端支持百万级视频并发亿级数据交互，以场景化能力接口形式对外赋能、满足行业应用的能力集成与二次开发需求。

方案架构图：

架构图

万物纵横智慧工地视频AI分析平台作为基于私有云部署的AI视频能力开放平台，其能力贯穿信号源、智能硬件层、平台层及应用层，在AI分析及视频传输全过程实现赋能。

其中，信号源包括视频信号，如ONVIF协议主流品牌摄像头、GB/T28181、EHOME协议摄像头，以及无人机、执法记录仪、IP音柱等设备的连接。

流媒体服务层：为视频赋能中台，其流媒体云平台架构保证高并发下信号的稳定传输，并实现多种类型前端设备及信号汇聚。设备与平台间灵活连接，通过授权实现模块化集中管理，各类应用终端共开放200余项视频能力标准接口。

AI服务层：根据实际算法任务目的从已整合好的多模态算法容器中选择一个或多个算法模型框架，对接入的视频流进行实时分析。

应用层：为合作伙伴自有系统业务层。通过视频赋能中台的相关接入，实现视频能力集成，通过灵活的二次开发与其自有应用融合。

实施流程

AI应用解决方案

在工地机房部署AI边缘计算盒子，通过工地内部网络绑定支持ONVIF协议或GB/T28181的摄像头，把接入的视频流分发到AI视频分析系统，分析服务器单台最高可支持32路视频并发AI分析，根据不同摄像头配置的不同算法对视频流进行分析；发现违规行为则记录图片或视频信息，并且可以通过语音广播功能对违规或不安全行为进行语音提示。

方案优势

1、兼容利旧现有摄像头

针对已部署有常规监控设备和系统的情况，支持海康、大华、宇视等不同品牌不2K、4K、8K高清视频、数据归集、传输、交互，通过集成不同品牌摄像头公有及私有协议，通过前端硬件重新进行视频编解码后再转码成私有协议上平台，并可封装成任意客户需要的视频流格式如m3U8,FLV,RTSP,RTMP,H5直播链接，供算法分析平台及第三方监管平台调用。

支持跨网段、多品牌、无固定IP摄像头接入，音视频流媒体高并发直播平台，打通视频源的协议层，兼容支持多品牌IPC摄像头、NVR、DVR视频流GB协议接入,视频统一汇聚分发，转发、上级监管平台级联等。

2、自研平台支持算法定制及调优

整个平台架构及软件由企业自主研发，底层算法框架基于Pytorch等主流深度学习框架深度整合开发，支持人脸识别、车牌识别、行为分析、物体识别、物体检测、实例分割、人体骨骼识别等多种不同算法模型，并能整合成统一框架，满足全场景视频AI分析需求的同时，可提供客户多特殊场景的算法定制及调优服务。

3、web端+手机端应用+短信告警推送

为了提升系统反应能力，通过web端将监控点的告警信息和画面情况通知到管理处置人员。

平台也可以提供API接口与其他信息化应用平台对接，通过手机端小程序或短信推送告警信息，在处置过程中随时随地的通过手机APP掌握监控点的实时情况，提升应急处置能力，有效缩短应急反应时长。

管理平台介绍

ThingSense AIoT平台是由四川万物纵横科技股份有限公司基于云原生(CNCF)技术自主研发的智能物联网管理平台。主要包含各类设备接入能力、AI能力及相关管理能力。各类模块化进行划分，在实际场景的应用层面实现自由灵活的功能在整体系统的管理层面保证顶层的集中统一管理。无论在单一平台架设还是多平台级联的系统中，都可以满足系统管理和平台能力使用的需求。

平台功能

包含云平台提供基础平台客户端：web端管理界面，手机端APP小程序。

首页看板：提供各项指标信息汇总页，可实时浏览关注项的简要汇总。

实时监控：提供前端监控终端设备汇聚到的视频流，便于实时监控，满足大屏点位展示需要。

AI报警：汇聚AI算法硬件相关报警信息，报警截图、报警片段视频并分权限、分组织架构、分报警类型管理。算法触发后进行违法处理，需小程序端任务下发系统（人员管理、区域管理、所辖区域设备管理、告警推送、推送处理，处理列表管理），同时下发到IP网络（对接IP网络系统对接），可与其他管理子系统和设备实现联动控制。

数据报表统计：提供设备及在线情况，AI报警情况统计，大数据分析。通过后台管理软件和预警信息数据库，实现预警事件的分类汇总，并将同类、同地区预警事件分类。形成日、周、月、季、年报表，提供决策分析使用。

系统设置：提供基础信息配置和用户相关权限管理。

设备管理：管理摄像头接入，绑定、解绑。

算法分配：对接入的摄像头可单独分配对应的算法所需特定场景算法.

其他设置：提供基础信息配置；API三方推送接口系统。

关联产品介绍

AI边缘计算盒子-DA320S

DA320S是一款高性能、低功耗的AI边缘计算产品，主控CPU为8核 ARM A53@2.3GHz，最高支持32TOPS的INT8峰值算力和2TOPS的FP32高精度算力，可同时处理32路高清视频硬件解码与12路编码。具备高性能、低功耗、环境适应性强等特点，通过搭配多样化深度学习算法，实现视频结构化、人脸识别、行为分析、状态监测等应用，实现智慧城市、智慧交通、智慧能源、智慧金融、智慧电信、智慧工业等领域边缘侧的AI赋能。