作者 / 阿宝
编辑 / 阿宝
出品 / 阿宝1990
摄像头解析力
其实解析力就是和摄像头的分辨率基本上是线性相关的额,我们看一个摄像头的分辨率高不高,最重要的就是几百万像素的摄像头。
比较老的倒车后视摄像头就是30W像素的,那个时候看倒车图像就非常模糊,现在无论是前视的DVR,倒车后视,还是360环视的摄像头,基本上都是100W的摄像头起步了,特斯拉Model 3前视三摄像头采用的三个CMOS图像传感器分辨率均为1280 x 960像素(120万像素),供应商为安森美半导体(ON Semiconductor)子公司Aptina。该摄像头捕捉的图像信息供给特斯拉Model 3驾驶员辅助自动驾驶仪控制模块单元使用。
可能有朋友会说,手机都上千万的像素摄像头,车载摄像头是没有这个技术能力?其实还真不是,手机因为本身摄像头的能力就要求非常高,需要拍照出来像单反的效果,所以摄像头本身的像素就非常高,而且传输也直接通过MIPI进入到主控去处理。
反过来看看车载摄像头,这部分车载摄像头拍照出来的图像主要是给机器使用的,做一些自动驾驶或者行车监控的,这部分100W的像素完全能够满足机器需要的数据了,数据越多,对于主机处理的能力及算力就越高,但是自动驾驶效果提升反而没有好处。
加上车载摄像头传输的信号需要一个串行器去传输,这个串行器目前还不能传输上千万像素的芯片,传输2K的视频就非常不错了,而且这部分车载主机需要去处理整车8-10个摄像头,如果每个摄像头都是上千万的像素,这个处理器的难度也增大,成本也增大,所以车载摄像头并不是像手机拼像素的能力,而且处理图像的算法能力才是王道。
测试解析度一般都是通过一个标准的解析度卡进行测试,可以提供实际拍摄的垂直分辨率和水平分辨率等辅助测试。
分辨率测试采用了国际标准的ISO12233解析度分辨率卡进行测试,采取统一拍摄角度和拍摄环境。而分辩率的计算又使用了HYRes软件,分开垂直分辨率和水平分辨率两部分进行,
可以简单理解就是按照标准的距离用摄像头去拍这个卡片,然后通过软件去读取这个摄像头拍摄的值,直接软件上就可以获取中心和四周的解析度的值,当然如果没有购买软件,也可以人肉眼去读取这个值,这样的误差由于人眼的视力因素,会有很大的偏差。
一般针对200W像素的摄像头,需要中心解析度≥800线,四周解析度≥700。
摄像头灵敏度
灵敏度是以32000K色温, 2000LUX照度的光线照在具有89-90%的反射系数的灰度卡上,用摄像机拍摄,图像电平达到规定值时,所需的光圈指数F,F值越大,灵敏度越高。
灵敏度越高最低照度越低,摄像机质量也越高。如果照度太低或太高时,摄像机拍摄出的图像就会变差。照度低可能会出现惰性拖尾。照度太高会出现图像“开花”现象。
摄像头信噪比
所谓信噪比指的是信号电压对于噪声电压的比值,通常用S/N符号来表示,信噪比又分亮度信噪比和色度信噪比。
当摄像机摄取亮场景时,监视器显示的画面通常比较明快,观察者不易看出画面干扰噪点,而当摄像机摄取较暗的场景时,监视器显示的画面就比较昏暗,观察者此时很容易看到画面中雪花状的干扰噪点。摄像机的信噪比越高,干扰噪点对画面的影响就越小。
车载中可以接受的信噪比是40db,当信噪比达到55db的时候,这时候噪声基本看不出来。
摄像头图像处理ISP初步介绍
我们看一看车载摄像头模组的关键参数,是不是还有几个没有阐述,比如白平衡、自动增益控制、色彩还原等等,上述摄像头描述就是主机控制,这里就有一个关键器件需要讲解一下,图像信号处理器ISP,这些活都是图像处理器ISP需要干的活。
下图展示了车载系统的基本组成:黄色的箭头代表数据的传输,蓝色的箭头代表控制信号的传输。
相机的图像处理流程大致是这样的:
从相机感受到电荷之后,转化成每个像素的数字信号,它的输出我们可以叫做一个bayer pattern,当bayer pattern进入到ISP之后,经过一系列的图像处理才会变成可以正常预览或者拍照形成的图像。
图像处理中有一些比较关键的步骤,比如我们会做白平衡,因为人眼的视觉会对所看见的颜色做一定的纠正,比如看在黄光照射的范围里,我们看到的黄光打亮白纸不再是白纸。所以很重要的是白平衡的矫正,白平衡的矫正之后会做demosaic,将每个像素的全部颜色通道全部还原回来。
然后每个Sensor的特性或者因为一些原因导致的偏色,需要通过颜色校正的矩阵乘法来做更正。再之后需要转到ycbcr域去做例如针对亮度通道或颜色通道的降噪或者补偿。总体来说,这是一个非常简单的流程,实际上在车载应用中的流程非常复杂,涉及到更多的如HDR多帧曝光,合成,tone mapping等算法。
ISP 放置的位置非常关键:
这里有的是会放置ISP图像处理芯片在摄像头这边,把处理后的信号传输给到主机,有的是不放置ISP芯片,由主机那边的内置ISP芯片进行图像处理,这样摄像头端的散热会好很多,辐射也小。
比如倒车后视摄像头,摄像头距离主机距离都是5-8米,根据车身长度决定,这部分一般是把ISP放置在摄像头模组那端,这样传输过来的信号都是ISP那边进行降噪处理后的信号,抗干扰能力也更强,缺点就是体积会变大,散热要求非常高。
譬如有的行车记录仪DVR摄像头,这部分摄像头距离控制主机CPU非常近,而且对于造型要求也比较高,就会把ISP放置在CPU这边(很多DVR的CPU都内置了ISP芯片),无论是成本还是设计都是最优方案。
参考资料:
1、https://mp.weixin.qq.com/s/RVIOlT_Yr5GmpNQ12mfBFQ
2、https://mp.weixin.qq.com/s/y1CCWyG8pJ8tONZTiiYXfw
3、https://mp.weixin.qq.com/s/ZZX6NyGKTpC8awscJV6PFg
4、https://mp.weixin.qq.com/s/bQ_-FJbxDr-h9tYw1G1KZA
5、https://mp.weixin.qq.com/s/GfJ_u81VoxgE4BCAYm4IOQ
6、https://mp.weixin.qq.com/s/ewmX5qFkidvL8z21SE8DFg
7、https://mp.weixin.qq.com/s/XRZ197HIiYDuBF55MaNsog
8、https://mp.weixin.qq.com/s/YS_2agnfZl6Otm6tvGy_7A
9、https://mp.weixin.qq.com/s/2E0aQeb_9BFAvbVlu-tdIg
10、https://mp.weixin.qq.com/s/bxubsR_8orap8GRsUB1xHQ
11、https://mp.weixin.qq.com/s/eNjbHZaaaa2YRt_X0Ke1pw
12、https://mp.weixin.qq.com/s/oq_fMnMMlF0HC_J5VJ-xUQ
13、https://mp.weixin.qq.com/s/iA1cOzz5tLiUREQIaNsNXw
14、https://mp.weixin.qq.com/s/XWpwgZ_nlx7pjewVtjckWQ
https://mp.weixin.qq.com/s/FiW0S6PRjdFWW8eeCiJWxQ
—END—
您的每一次点赞和再看,转发、都是对我的肯定,谢谢!
本文首发于微信公众号:阿宝1990。文章内容属作者个人观点,不代表和讯网立场。投资者据此操作,风险请自担。
(张洋 HN080)