AI智慧微脑项目,主要研发一款基于AI芯片的高性能计算处理设备,实现基于场景的AI算法分析和计算功能。设备主要实现对外部输入RTSP视频流中的人员、车辆等进行结构化分析与识别。设备内部带有高性能视频处理单元与AI运算单元,加上薪火科技先进的AI深度学习算法,组合实现高精度的人脸识别、车辆识别、人员属性、人体、非机动车等结构化识别功能。
设备作为AI识别边缘计算单元,提供算法和算力的能力输出,提供丰富的API接口,方便用户进行二次开发与业务服务。应用于其赋能各种场景业务集成方案。
智慧微脑提供的AI识别硬件处理能力可广泛应用于需要人脸抓拍、人员结构化、机动车结构化识别、白名单或黑名单人脸识别的场合,如智慧社区、智慧校园、智慧楼宇的、智慧景区等安防场景的结构化识别、黑名单报警、陌生人识别等,以及电力系统、电信机房等涉及人员管控、智能化识别的场景。
AI智慧微脑产品,以基于深度学习技术的算法为基础,结合先进的硬件资源,实现领先的人脸、人体和视频结构化分析能力。核心技术能力如下:
类别 接口标号 | 功能 | 说明 |
设备接入能力 | 视频流输入 | 视频流分辨率:1920 x 1080(200万)、2560 x 1440(400万)、3840 x 2160(800万) 万)、3840 x 2160(800万) |
视频解码类型 | H.264/H.265 | |
人脸抓拍机 | 最大支持32路抓拍机接入(抓拍机需支持GA/T1400协议) | |
工作模式 | 脸人绑定+人脸 识别:(最大32路) | 人脸抓拍、人脸识别、人脸属性、人体抓拍、人体属性、脸人绑定 |
视频结构化:(最大32路) | 人脸、人体、机动车、非机动车、车牌 | |
智能警戒(最大32路) | 越界/区域入侵、聚集、徘徊、跌倒 | |
数据上报 | 人脸识别 | 人脸抓拍、人脸识别、人脸属性结果 |
车辆识别 | 机动车/非机动车机构化识别,车辆颜色、型号、车牌 | |
告警 | 警戒告警事件 | |
识别性能 | 人脸 | 抓拍率 ≥ 99% |
抓拍误抓率 < 1% | ||
识别误识率:< 0.5% | ||
白名单识别通过率 > 99.5% | ||
最大底库:30万人像库 | ||
人体 | 抓拍率 ≥ 95% | |
抓拍误抓率 < 1% | ||
机动车 | 抓拍率 ≥ 90% | |
抓拍误抓率 < 1% | ||
车牌 | 抓拍率 ≥ 95% | |
抓拍误抓率 < 1% | ||
识别率≥ 95% | ||
硬件参数 | CPU | 四核 Cortex A53 支持NEON加速 集成FPU |
NPU | 28.8TOPs@INT4算力 支持CNN、RCNN等 | |
RAM | 8GB DDR4 | |
ROM | 8GB EMMC 5.1 | |
DSP | 800MHZ VDSP | |
软件系统 | Linux系统 | |
视频编码 | H.264/H.265 支持 I/P/B 帧 | |
视频解码 | H.264/H.265 解码码率300Mbps | |
内置安全模块 | 支持安全启动 | |
加密算法 | 硬件实现AES/DES/3DES 加密算法 | |
安全类型 | 硬件实现SHA-1 / SHA-224 / SHA-256 | |
视频 | 支持 HDMI 2.0b 输出 支持多画面分割 | |
音频 | 支持一路音频MIC 支持外接Audio Codec | |
USB | 支持4路 USB3.0、1路USB串口 | |
显示接口 | 支持HDMI接口 | |
硬盘 | 硬盘内置(选配) | |
网络 | 支持2路千兆以太网RJ45接口 | |
尺寸 | 430mm*300mm*43mm(标准1U机箱) |
本项目设备主要针对外接视频、图像设备的数据进行分析处理,结合业务功能设置,实现预警事件的智能化分析。实现接入设备的数据获取,视频、图像等数据的AI图像算法识别,计算分析获取智能化结果后,形成业务预警事件上传到第三方业务平台。
支持设备:
Ø 接入设备支持符合ONVIF、RTSP标准的高清网络摄像机;
Ø 符合GA/T1400协议的人脸抓拍机;
Ø 支持H.265/H.264视频标准,最高可支持800万像素IPC的接入;
支持应用:
Ø 总人脸库最多支持30万张人脸图片,支持64个库;
Ø 多类算法混合:人脸模式、混合模式(人体结构化、人脸属性、机动车结构化);
Ø 支持人脸抓拍、人脸识别比对、陌生人识别告警等;
Ø 支持人脸属性的识别:性别、年龄、戴帽子、戴眼镜、戴口罩等;
Ø 支持人脸、人体、机动车、非机动车、车牌的抓拍;
Ø 支持人上下衣颜色,是否佩戴安全帽等人体属性解析;
Ø 支持拌线越界、区域入侵、计数等智能警戒功能。
在产品应用场景上,提供人脸识别和全目标结构化解析的能力,配合上层平台软件可实现人脸抓拍识别、视频结构化场景的闭环。应用于需要人脸识别的场所,如智慧小区的出入口、办公楼宇的出入口、重点人员名单管控和识别报警、陌生人识别等。以及需要脸人机非牌抓拍和车牌识别的结构化场所,如智慧园区的人车管控、智慧社区的车牌识别等。
目前本项目研发产品已经部署于智慧社区、智慧景区等标杆项目中,配合平安社区平台实现智慧社区中人员管理、车辆管理、预警事件等功能。