更高的性能。通过更先进的技术,满足工业、自动驾驶、安全监控等对图像画质高精度的需求,比以往更加强大和精确。以自动驾驶为例,就需要捕捉非常大的视觉动态范围,并且比人眼更精准地识别暗处和明亮的图像细节,以保证行车及路人的安全。
更低的功耗。无论产业应用还是个人移动终端,都对功耗比较敏感,耗电、发热等问题都可能影响整体部署成本和用户体验,这就要求ISP的创新不能以能效为代价,以更好地满足数字化转型中的现实需要。
如此看下来,ISP的技术创新难度并不简单,需要技术人员一点一滴地突破,难怪能引发不小的专业讨论。
未来:ISP的技术展望
纵观极术社区中围绕玲珑ISP展开的讨论,广大开发者比较关心的话题,大多围绕在3A算法是否在ISP里运算,哪些场景下需要单独的ISP芯片,机器学习对ISP芯片的影响等等。
从中,我们也可以看到ISP芯片未来几个比较明确的创新方向。
一是3A算法的不断升级。
想要提升成像质量,3A算法即自动对焦(AF)、自动曝光(AE)和自动白平衡(AWB),起到了十分重要的作用。比如说,当传感器将图像信息传递给ISP芯片时,自动判断是否对明亮或暗处的像素采取行动,能够让计算机视觉系统做出更准确的判断。
以安谋中国本土团队自主研发的“玲珑”i3/i5 ISP 处理器为例,就通过3次曝光HDR,将一个场景的长时间、中时间、短时间曝光合成一帧,从而在逆光等宽动态情况下,对明暗区域都能够很好地记录,从而在宽动态范围、低光降噪等方面获得不错的表现。说人话就是,逆光拍摄相机也能看清你的美。
第二个技术趋势,是从集成向外置演进。传统ISP芯片被集成在处理器内,随着高像素、高画质的需求出现,CIS传感器的尺寸也变得越大,外置独立ISP在功耗上更具优势。不过,相比内置方案,成本更高、开发周期也较长,这就需要芯片厂商进行取舍。
第三个技术趋势,是ISP与AI的结合。将传感器信息转化为图像是一个复杂的过程,ISP往往有成百上千个不同的参数进行调整。而前面提到,视觉感知在各行各业中的应用越来越广泛,不同的镜头和传感器具有不同的特性,这时候为特定相机系统进行优化调整、开发针对性的芯片产品,就变成了一项极具挑战性的任务。所以将AI处理器的智慧分析能力与ISP的信号处理能力,能够达成更强大的成像效果。
由此则产生了第四个技术趋势,那就是定制化支持。如前所说,,ISP可应用场景越来越多,不同的场景对应着不同的能力需求,使得通用性的ISP难以全面通吃,这就要求IP开发厂商能够与服务垂直行业的开发者保持紧密沟通与及时响应,来打造更具灵活性、定制化的产品。
今天,中国正在以举世瞩目的速度进入到智能时代,被数字化的物理世界不仅仅是消费者手机中的一张张图片,还是各个行业智能机器“眼中”不可或缺的数字养料,滋养着整个中国的智慧水平。
从这个角度看,ISP芯片已经成为中国智能产业不可忽视、不容错过的一张底牌,等待着更多有识之士去探索和解密。
本文为专栏作者授权创业邦发表,版权归原作者所有。文章系作者个人观点,不代表创业邦立场,转载请联系原作者。如有任何疑问,请联系editor@cyzone.cn。