Camera调试常见问题及解决方法

欧阳

   在嵌入式系统，如手机等平台上使用的Camera sensor通常是由类似I2C这样的总线进行寄存器控制，由CPU端的Controller提供所需的驱动时序，通常支持YUV和RGB等数据格式。有的Sensor需要由CPU进行图像处理工作，有的Sensor自己会集成图像处理芯片，完成一些基础的图像处理工作，还有些高像素的Sensor甚至自己完成JPEG的编码工作。因为硬件的多样性，我所遇到的问题可能和你的原因现象都不尽相同，分析内容仅供参考。Sensor端I2C总线没有响应

• 症状
  ( k" r: k: o( {0 z* |7 ]! q
  * B) _. g: {- ^4 N8 M- n
  

      

    所有输入电压和时钟信号都正常，往I2C总线上写入读取寄存器数据的命令后，sensor没有响应，没有数据从I2C总线上输出。

• 分析
  * s' F* V4 q$ ~4 T& m4 q
  
  0 D0 D# J; g9 I/ v3 p

    因为测量发现一切输出信号都正常，所以往往都会怀疑Sensor硬件存在问题，不过99%的情况，实际的原因总是因为I2C总线的ID值没有设置对，导致设备不响应命令。据我的观察，每次一个新的工程师在调试Sensor的时候几乎都会遇上这个问题。

    之所以这么容易设置错误的原因，是因为通常Camera Sensor的Spec上所写的I2C ID号，还包含了最后一位读写方向位。而这一位在I2C总线的定义中，严格来说，不属于ID的一部分，所以Linux I2C的驱动API中的调用参数里的ID号，通常是不考虑这一位的，读写方向位会在具体的读写操作中，在寄存器中进行设置。

) I: C' }  o. K4 U* y

% R# _/ J) p2 i; n5 D# I# e
• 解决
  
  8 i1 ^5 n. u1 N- O& ^9 ]0 C0 ~

    例如Spec上会写 读写寄存器操作 I2C ID 分别为 0x64和0x65，实际调用API时应该使用0x32作为该设备的I2C ID
9 A3 ]% h2 O0 w0 c6 K图像中有不断变化的细密的水平条纹

• 症状
  . H/ G  ?4 T' e# m( p  F, P& _
  
  ) n" d( w- o( C8 N9 X: b

$ W; N7 e, R6 q4 D6 K    与荧光灯的频闪造成的大面积的滚动水平条纹不同，表现出来的是一个像素高的水平条纹状躁点，位置不固定，数量比较多，而且随光线强弱有一定的变化

! }' r8 _2 T& k' [0 R  z$ \& @

2 [$ o" ]+ ^; K/ f3 x! p4 z
• 分析
  5 D' S) W5 @2 G5 u. P6 x
  
  

3 x& B8 _2 w. l( D) @    因为设置某些sensor寄存器的时候，会影响到这些水平条纹的颜色，所以基本上排除是在数据传输过程中板子对数据造成的干扰，也排除接触不良的可能性，应该是数据在sensor内部已经存在这些水平条纹。
    此外相同的初始化序列，相同的sensor，在厂商的demo版上也没有发生这种情况，所以也基本排除软件的问题。
    最后，发现原先为了节省硬件成本，将sensor的两个电压相同的模拟电和数字电由同一芯片输出供给，导致两者之间互相干扰，影响了sensor的正常工作

1 G0 {: S8 Q% p2 |9 [1 s7 c6 ^

# z, I; b, i5 G: i
• 解决
  
  " d1 {) |8 d& Z- F4 M) U7 l
  

$ H( m1 d% S3 ]! ?& o  r/ n    将模拟电和数字电分离单独供电
9 b7 @5 F1 p0 ?" W, u
* L$ q  M, `/ [3 H6 E% J7 M8 ~图像上有固定的锯齿状垂直条纹

• 症状
  
  2 h- A- Y) D8 V- M
  

    图像上有明显的垂直条纹，全屏分布，非常细密，好像百叶窗一样。

3 {' Z$ Z7 _& Z  j

0 U" |& g' e4 `$ B. o+ _, B
• 分析
  ( T" `4 u+ H: i% u
  , c+ F' T9 t$ g
  

5 H) ?/ ]' K5 Z    仔细看可以发觉该垂直条纹实际上是由于图像上相邻的两两像素互相错位造成的锯齿状条纹
4 b( H4 w) C# `/ m' g9 @; i+ Q
' _0 C7 q* W# n% ?6 C, E    仔细分析spec可以看到，由于sensor是按字节送出图像数据，在RGB565模式下，两个字节表示一个像素。而在我所使用的CPU的Camera控制器中，数据是按4个字节也就是一个字为单位处理的，由于CPU这端是按LSB方式处理数据的，所以在一个字内部，未经调整的话，两个像素的顺序是颠倒过来的。也就是最终由DMA将数据送到内存的连续buffer中时，像素的顺序是：像素2，像素1，像素4，像素3。。。
5 K+ a, K" O  {1 t. A1 H! D+ B
7 v9 v( A& p7 w( B

8 e: j7 R2 G  }; L- S, q
• 解决
  : D1 w; G% Z) s! J7 Z
  
    Q, U2 y8 O3 ^( {, y

    用程序调整像素顺序，为了减少附加计算对CPU的负担，可以将这一步操作合并在其它类似颜色转换或PACK模式转Planer模式等操作中。
: N2 `  c4 N) U
0 m! l- J; a5 `0 F6 c大尺寸时容易出现图像错位

• 症状
  # j# ?" W  J; p9 m& u
  
  ; ?/ ^9 ^. T  d+ G! Q/ b" l( m

    当sensor工作在最大分辨率的情况下时，图像容易出现上下错位的现象。
; C2 N5 P: s" R7 y9 i' E

• 分析
  
  : j) }' @; Y& v% {
  # @1 K5 }  n: @/ |+ F: A

    跟踪程序可以看到这时候CPU的Camera控制器的FIFO缓存发生了溢出现象，也就是说DMA来不及将FIFO中的数据传送到内存中，该例中sensor在最大分辨率的情况下，输出数据的时钟工作在24MHZ，理论上说，DMA应该是来得急传送数据的，但是可能因为内存带宽还会被其它设备如CPU占用，导致来不及写入内存，使得DMA没有最大负荷的工作，所以来不及将FIFO中的数据读出，导致部分数据丢失，图像错位。
0 o1 b4 k6 _  G' j: v( i& b7 ?7 L, `
& k* @8 s+ m7 X5 f- s

• 解决
  
  
  # b3 ~! @  S+ E% ?. }$ M

    某些情况下，改变DMA传输的启动阙值可以解决该问题，但是有些情况是无效的
+ x4 z/ K1 U; F7 {2 X4 D
6 d' H! ~! [* z) [1 k, L1 A    考虑到最高分辨率仅在拍照的时候使用，预览的时候并不使用该分辨率，所以，在不影响预览桢数的情况下，可以在拍照的一瞬间改变分辨率的同时，修改sensor的时钟频率，降低到一个不会导致FIFO溢出的频率

    另外，在截获最高分辨率的图像的同时，尽量不执行其它的内存相关操作。截获完图像马上切换回预览用的分辨率。通过这些办法，减少发生FIFO溢出的可能性。

读取到的数据显示出来的时候是花屏

# Z/ q" J, m% O- X+ C; _
• 症状
  0 n1 e+ F: h- C5 S9 Z* i& c2 K
  $ I0 h7 X6 w' b# W3 s
  

  `# k. v. I# K6 `    读取到的数据显示出来的时候是花屏，但是明显是随着所拍摄的对象的变化而变化的。
3 e% K! ^4 R4 ]9 }* g0 b
. f; `9 f( l7 |, T% S8 r' u- Z

0 b1 m! \5 T7 Q' q, T; Q
• 分析
  / E: `2 @$ }. r. r0 m
  5 \* k/ }# Y  k
  . q2 _5 m9 A3 ]4 t

" H$ B/ t8 X9 ?1 k( a* x    具体来说，常见的情况包括：
    显示的数据是完全的花屏，或者可以看出物体大致轮廓，但颜色完全不对，例如一片绿色。这种情况往往是因为图像数据格式不匹配，例如没有处理YUV2RGB，YUV的各个分量采样顺序与软件计算的取值顺序不匹配等。
0 A+ w7 F" k" Y9 t$ e) h# _
    如果花屏的具体表现是图像不断变换，没有规律，通常有可能是数据接收的触发边沿有误，导致没有正确的接收数据。
6 ~& H3 b' S# t5 Y" M& ^; O7 u
2 m; ?) v) u0 n' \4 G$ ]+ s    另外有一次，花屏的时候，仔细观察花屏的图案，发现有部分错位重复的图案的迹象。因此分析可能是Sensor的物理layout，其长宽比例与LCD刚好相反，仔细查看Spec得到确认。
9 z! G% q0 x+ A5 `6 E( u# v
9 y6 I  A: k7 I+ Q0 C1 w
- k4 v  Y, a' ]& i$ D, V6 X: a

# ~( i' J- j- |, e/ Y+ D5 y! _
• 解决
  
  ) W, u* E; C! d6 Z0 ^5 z
  5 l% g1 e1 J, N  \- `

    具体情况具体处理了。
, V# g5 e. J2 Z7 C* p! h7 [3 h


0 S4 d% U" R! `+ Z' t
9 [7 ~) P( A/ N; @

Eletron

THE WAYS IS GOOD

mirion

受教了

zhu276709288

好经验！谢谢分享！