当下,视频产品飞速迭代发展,从最早的VGA到720P、1080P,再到2K、4K,每一次技术升级,都大大提升了视觉产品的用户体验。其中,除了分辨率的持续升级,人们对夜视效果视觉体验的追求也从未停歇。夜幕降临光线不足时,当前主流视觉产品常常只能依靠红外、白光等外部补光方式实现黑白图像或彩色画面,颜色丢失/光线污染严重影响客户体验;而随着视觉Soc和AI NPU的深度结合,“黑光全彩技术”全新面世,它提高了产品感光极限,优化了产品在暗光环境下的彩色成像水平,给用户提供了优于人眼视觉的体验。
全志针对这一技术升级与市场需求,在“V85X系列”芯片上推出了自研的新一代AI ISP 智慧图像处理引擎—“全志智影”。“全志智影”通过海量数据训练以及结合SOC平台的模型深度优化,它不仅可以在各类复杂低照场景下提升成像效果,实现黑光全彩,还可以为低照下AI检测处理(如人形、人脸等)提供更优质量的输入来提升检测识别率,在降低误触发等痛点功能上起到关键作用。
“全志智影AI ISP”对比自身及业界传统ISP,可以在同等Sensor/镜头下提升2~4倍的感光度,优化低照度亮度/颜色/拖影表现。如下效果对比图,搭配背照式1/2.7 Sensor+F1.0光圈黑光全彩;此外,基于该技术搭配传统Sensor+普通镜头,在低照效果下同样有明显提升,该技术可广泛应用于安防、车载、泛视觉等各类场景,为这些场景下的用户体验提供升级优化的解决方案。
与此同时,“全志智影AI ISP”针对终端产品在落地开发及量产过程中遇到的典型需求问题进行了深度优化,具备如下三大技术特点:
(1)系统低消耗,多目易拓展
可在最低128MB 16bit DDR3下实现1080P~1440P的处理及搭配客户应用量产,「全志智影AI ISP」搭配的降噪模型仅有百KB级别大小,无需更换Flash类型便可支持。同时引擎架构可支持双摄,以及未来三摄,便于未来多摄产品升级迭代。
(2)系统低功耗
相比于原有消费类安防产品红外黑白画面需要外挂红外灯板的成本和功耗(1W~2W),“全志智影AI ISP”在同等规格图像处理上只增加了200~400mW(取决于产品分辨率及帧率),在实现全彩画面的同时,节省红外补光的成本和功耗,还可进一步延长例如低功耗电池摄像机/可视门铃等至少0.5倍到1倍工作录像时长(具体倍数取决于夜晚红外触发次数),大幅度提升用户对整机体验。
(3)毫秒级冷启动
冷启动“全志智影AI ISP”出图到内存中,时间在500ms内;快启智影2.0即将在Q3发布,在原来基础上进一步提升出图速度,同时搭配新一代图像传感器组成AOV(AlwaysOnVideo)及预录(Pre-roll)方案,实现低功耗产品全天候亮如白昼、持久续航。
目前,V85X平台SDK已搭配全志最新“全志智影AI ISP”发布,同时提供稳定、易用的SDK软件开发包,以支撑视觉产品的快速升级及量产。
“全志智影AI ISP”技术的全新发布,不仅是一次技术的突破,也是对传统成像技术的一次体验升级,更是全志AI技术在端侧落地的出色产品体现,它将让我们在黑暗光线条件下能看得更远、更清晰。未来,全志将基于“全志智影AI ISP”技术持续优化迭代,进一步提升AI ISP在低照度降噪效果,探索拓宽AI ISP在图像效果增强的更多可能性,并在后续不断推出更优秀的视觉芯片方案,为千行百业的智慧视觉带来无限可能。