interview review

M:

2. gamma correction

人眼和相机对强度的变化敏感程序不一样, 人对暗部更敏感.

上面一条人眼觉得是均匀, 下面一条是相机真实的均匀.


人眼觉得的中间值 在相机中是21.8%, 为了让灰度的分布更符合人眼, 我们需要对图片进行gamma校正, 使得各用128个数字来表示相机真实世界中21.8%为界线的两个部分, 这时的gamma对亮度进行调节使得暗位细节更多了, 亮位细节变少了, 更符合人眼特征, 但是储存在图片中就是灰度值 变大了, 所以当我们显示在屏幕上时, 需要对这个灰度值还原到真实的灰度值.

所以gamma 编码是让更多数字来表达暗部(结果就是数字表达的值是符合人眼的均匀值,但是大于真实灰度值, 比如128表示21.8的强度), 而gamma解码是把这个数字还原到真实的灰度值(把128还原成21.8)

4. intrinsic matrix
   [ f x s c x 0 f y c y 0 0 1 ]
   [fxscx0fycy001]" role="presentation" style="position: relative;">⎡⎣⎢fx00sfy0cxcy1⎤⎦⎥$$\left[\begin{array}{ccc}{f}_x& s& c_x\\ 0& f_y& c_y\\ 0& 0& 1\end{array}\right]$$
   ​fx​00​sfy​0​cx​cy​1​ ​

$(c_x,c_y)$: camera center in pixels
$(f_x,f_y)$: focal length in pixels

$\frac{X}{Z}=\frac{u}{f_x}$
其中 $f_x=\frac{f}{p_x}$, $f$ 是focal length in world unites (millimeters), $p_x$像素宽度, 通过胶片宽度除以像素X方向的个数得到.

下面来看skew

$s=f_{x}tan\alpha$

假设每$p_y$在$p_x$上面的偏移是 $b$
那么$tan\alpha =\frac{b{p}_x}{p_y}$

那么 [ f x s c x 0 f y c y 0 0 1 ] ∗ [ X Z Y Z 1 ]

* ​fx​00​sfy​0​cx​cy​1​ ​∗ ​ZX​ZY​1​ ​

第一行可得$f_x\ast \frac{X}{Z}+s\ast \frac{Y}{Z}+c_x=f_x\ast \frac{X}{Z}+f_{x}tan\alpha \ast \frac{Y}{Z}+c_x$

这里 $f_{x}tan\alpha \ast \frac{Y}{Z}$有两种理解方式, 第一种是通过$tan\alpha \ast Y$将在世界坐标系中将$Y$转成$X$方向的偏移$bX$, 然后将这个偏移通过乘以$\frac{f_x}{z}$转成x方向的像素偏移

第二种是 $f_{x}tan\alpha \ast \frac{Y}{Z}=\frac{f}{p_x}\ast \frac{b{p}_x}{p_y}\ast \frac{Y}{Z}=b{f}_y\ast \frac{Y}{Z}$ 先算在y方向有多少像素, 再乘以$b$得到偏移

第二行注意如果有skew, 那么$f_y$得用$\frac{f_y}{cos\alpha }$代替, 因为y轴变斜了, 相应也变长了

https://towardsdatascience.com/camera-calibration-fda5beb373c3

https://towardsdatascience.com/what-are-intrinsic-and-extrinsic-camera-parameters-in-computer-vision-7071b72fb8ec