H6A智能相机系统
研制单位 | 中国科学院长春光学精密机械与物理研究所 | 先进程度 | |
联系人 | 吴笑天 | 联系方式 | |
支持渠道 | 所属创新课题 | 专业领域 | |
成果关键词 | 智能相机、认知跟踪、图像综合清晰化、嵌入式深度学习 |
“H6A智能工业相机系统”是以辰芯GSENSE主流产品为图像传感器,以仿照德国开源相机产品Vision Components商业模式为出发点的,以面向下一代图像处理架构为宗旨的系列化开源智能相机工业产品;“H6A智能工业相机系统”是在“H6A智能工业相机系统的开源架构”的统一框架范畴内标准化研制,系列化发布。
“H6A智能工业相机系统”可依用户需求,硬件弹性扩容搭载H6A中的几项或全部的功能软件;其中,H6A是指制导、探测、识别、电子信息领域中常见的图像处理机器视觉的典型六大类自动处理问题的简称,即:硬件化自动对焦(HAFC: Hardware Auto Focus Control)、硬件化自动调光(HAEC: Auto Exposure Control)、硬件化自动白平衡(HAWB:Hardware Auto White Balance)、硬件化自动图像增强(HAIE:Hardware Auto Image Enhancing)、硬件化自动检测识别(HADI:Hardware Auto Detection and Identification)、硬件化自动目标跟踪(HAOT:Hardware Auto Object Tracking)。
“H6A智能工业相机系统的开源架构”的硬件主体的研制将围绕基本成像、图像精算、信息组网、智能扩展四个方面开展,软件主体的研制将以深度学习为核心理论支点,以计算光学、认知跟踪、图像综合清晰化、智能感知为突出专业特色的H6A软件资源分别延伸衍生拓展,以“基于B/S结构的软件发布评估平台”和“深度学习的嵌入式智能相机系统的附属环境”为外围依托;最终形成以H6A图像处理、机器视觉为主要内容的H6A软硬件智能工业相机生态系统。
H6A智能工业系列化相机产品采用成像单元涵盖辰芯GSENSE系列主流产品,大体面向科学级(军工级)成像领域的三类典型需求:以GSENSE2011 为代表的高帧频成像、以GSENSE400BSI为代表的高灵敏度成像、以GSENSE5130为代表的高分辨率成像。
H6A智能工业系列化相机产品的H6A运算载体可依用户定制化并无障碍驱动全系列GSENSE传感器产品,其运算载体主要分为三个系列,以面向快速响应实时输出的DSP系列、以面向嵌入式组网及智能信息终端采集的Davinci系列、以面向板级深度学习智能扩展的CUDA系列。
DSP系列相机系统,在成像同时实现提供在线快响应低延迟视频分析处理,主要搭载认知跟踪(可实现单目标500Hz高帧频跟踪,多目标30Hz高精度跟踪),图像反卷积复原软件包(可实现200Hz实时化图像反卷积复原处理),面向图像跟踪制导、计算光学间接成像领域。
Davinci系列相机系统,在成像的同时提供嵌入式视频H264压缩、分析、提取的能力,主要搭载图像综合清晰化软件包(可综合化平衡调光调焦白平衡及图像去雾低照补偿等参数,实现光机电算综合调节下的图像质量最优),主要面向光电侦查、视觉分析等领域。
CUDA系列相机系统,可提供板级嵌入式深度学习处理能力,主要搭载轻量级的深度学习软件包(基于YOLO架构实现30Hz的图像分析,十类预置目标大于90%的识别率),实现目标自动辨识、场景理解等高级视频应用。