硬件知识库 /

Camera Development Guide

PART A  光学基础

Optics Fundamentals — 焦距 · FOV · 景深 · 光圈 · MTF · 畸变 · CRA

A1 焦距(Focal Length / EFL)

焦距 $f$ 描述光学系统的汇聚/发散能力,是相机镜头最基础的参数。

凸透镜 物体 像(倒立) F do(物距) di(像距)
薄透镜公式(Thin Lens Equation)
$$\frac{1}{f} = \frac{1}{d_o} + \frac{1}{d_i}$$
等效焦距(对比 35mm 全幅)
$$EFL_{35mm} = f_{actual} \times Crop\ Factor, \quad CF = \frac{43.27\,\text{mm}}{d_{diagonal}}$$
靶面规格对角线Crop Factor代表 Sensor
全幅 35mm43.3mm1.0×Sony A7IV
1"16.0mm2.7×IMX989(小米13Ultra主摄)
1/1.56"10.86mm3.98×主摄Sensor ✓ 某机器人项目主摄
1/2"8.0mm5.4×IMX386
1/2.8"5.7mm7.6×腕部Sensor ✓ 某机器人项目腕部
1/4"4.0mm10.8×感知Sensor ✓ 某机器人项目感知

A2 FOV 视场角

视场角公式(水平/垂直/对角)
$$FOV = 2 \times \arctan\!\left(\frac{S}{2f}\right)$$

$S$:靶面尺寸(mm,H/V/D 分别代入);$f$:有效焦距(mm)

焦距H-FOVV-FOVD-FOV视野参考
2.8mm72.2°56.9°84.0°超广角,视野接近人眼极限
4.0mm55.8°43.3°67.1°广角,日常拍摄首选
6.0mm39.5°30.1°48.3°标准视角
8.0mm30.1°22.8°37.2°中长焦,人像压缩感
12.0mm20.3°15.3°25.1°长焦,适合远景
25.0mm9.9°7.5°12.3°超长焦,月亮/鸟类
实战经验:某机器人项目 头部相机视野应覆盖机器人作业空间(约1~3m,FOV ≥ 60°),主摄Sensor 搭配 4mm 广角镜头是较优选择,兼顾分辨率与视野。

A3 景深(Depth of Field)

超焦距 & 景深公式
$$H = \frac{f^2}{N \cdot CoC}, \quad DOF_{near} = \frac{H \cdot d}{H+d}, \quad DOF_{far} = \frac{H \cdot d}{H-d}$$

$N$:光圈数;$CoC$:弥散圆(≈ 2×像素尺寸);$d$:对焦距离

变量增大效果减小效果机器人视觉建议
焦距 $f$景深更浅(背景虚化强)景深更深短焦(4mm),景深深更易对焦
光圈 $N$景深更深(进光少)景深更浅f/2.0~f/2.8 平衡进光与景深
距离 $d$景深更深景深更浅操作距离 0.3~1.5m

A4 光圈 f/# 与进光量

光圈数 & 像面照度
$$N = \frac{f}{D_{EP}}, \quad E \propto \frac{1}{N^2}, \quad \Delta EV = 2\log_2\!\left(\frac{N_2}{N_1}\right)$$
光圈大小示意(相同镜头直径) f/1.8 进光 100% f/2.4 进光 56% f/3.5 进光 26% f/5.6 进光 10% f/8.0 进光 5%

A5 靶面尺寸与像圈匹配

像圈匹配原则:镜头设计像圈直径必须 ≥ 靶面对角线,余量通常留 10~15%。像圈不足会造成四角严重暗角,无法通过 ISP 完全校正。

A6 分辨率 & MTF

Nyquist 极限 & 系统 MTF
$$f_{Nyquist} = \frac{1}{2p}\ \text{lp/mm}, \quad MTF_{sys} = MTF_{lens} \times MTF_{sensor} \times MTF_{algo}$$

主摄Sensor:像素 1.0μm → Nyquist = 500 lp/mm

MTF 曲线示意图(空间频率 vs 对比度) 0 30% 60% 100% 镜头MTF Sensor 系统MTF MTF50 空间频率(lp/mm)→ 0 250 500
MTF 指标定义量产验收参考
MTF50对比度降至 50% 的空间频率中心 ≥ 300 lp/mm
MTF30对比度降至 30%角落 ≥ 200 lp/mm
中心@Nyquist500 lp/mm 处对比度≥ 20%
均匀性角落MTF / 中心MTF≥ 55%

A7 畸变(Distortion)

径向畸变率
$$D\% = \frac{y' - y_{ideal}}{y_{ideal}} \times 100\%$$
无畸变 桶形畸变 (D < 0) 枕形畸变 (D > 0)
实战:手机广角镜头桶形畸变 2~5% 很常见,ISP 的 LDC(Lens Distortion Correction)模块做软件校正,校正后的图像边缘会有轻微裁切损失(约 3~8% 有效像素)。

A8 CRA 主光线角

CRA:不同像高处主光线入射角 Sensor 靶面 中心 CRA=0° 边缘 CRA=28°(匹配) 不匹配→串扰/暗角
主摄Sensor 边缘 CRA 约 26~30°(具体见 Sony Datasheet),镜头设计时需与 Sensor CRA 曲线严格匹配,超差 ≥ 3° 需重新设计 MLA 偏移量。

🔢 交互式光学计算器

FOV & 景深计算器(主摄Sensor / 自定义靶面)

点击计算...

PART B  Sensor 选型

FSI/BSI/Stacked 架构 · 主摄Sensor 规格 · 某机器人项目 多路 Sensor 对比

B1 Sensor 架构对比

Sensor 架构截面对比 FSI 前照式 微透镜 MLA 滤色片 CFA 金属互连层(阻挡光) 光电二极管 PD QE ~65% BSI 背照式 微透镜 MLA 滤色片 CFA 光电二极管 PD(翻转) 金属互连层(光路下方) QE ~90% Stacked 堆叠式 微透镜 MLA 滤色片 CFA Pixel Die(BSI) Cu-Cu Bonding Logic Die(ISP+DRAM) 极速读出 ✓
架构感光效率读出速度集成度成本代表型号
FSI~65%AR0130, OV2640
BSI~90%IMX577, OV13B10
Stacked~95%+极高极高(含DRAM)IMX906, IMX989

B1b 主流 Sensor 厂商横向对比

Sensor 芯片厂商格局直接决定模组的成本、供货稳定性与画质上限。以下是主流厂商的定位与代表产品:

厂商定位架构强项代表型号某机器人项目 用途
Sony(索尼)全球第一,旗舰画质Stacked BSI,PDAF,HDRIMX906 / IMX989 / IMX766主摄 ✓
Samsung(三星)自研+代工,高像素ISOCELL,Quad Bayer,HM系列HM3 / GN2 / JN1备选主摄
OmniVision(豪威 OV)中高端,产品线全PureCel, 全局快门 GSOV9782 / OV13B10 / OV64B腕部 ✓(GS)
SmartSens(思特威)国产快速追赶,安防/工业GS,NIR增强,低功耗SC035HGS / SC585XS / SC500CS感知 ✓(NIR+GS)
格科微(GalaxyCore)国产中低端,性价比BSI,入门 AI 处理GC8054 / GC32E2
安森美(onsemi)工业/汽车级GS,高动态,车规AR0234 / AR0521工业机器人备选
海力士(SK Hynix)中端手机,成本控BSIHi-846
选型法则:感光芯片决定约 70% 的成像效果,镜头再好也补不了 Sensor 的先天不足。预算允许的话,主摄首选 Sony;需要全局快门(抓拍/机器人)首选 OmniVision 或 SmartSens;结构光感知配套 NIR 增强 Sensor(感知Sensor)。

B2 关键参数与公式

动态范围 & 信噪比
$$DR = 20\log_{10}\!\left(\frac{FWC}{RN}\right)\ \text{dB}, \quad SNR = \frac{N_s}{\sqrt{N_s + N_{dark}^2 + RN^2}}$$

主摄Sensor示例:$DR = 20\log_{10}(6000/2.0) \approx 69.5\ \text{dB}$

参数符号主摄Sensor典型值说明
像素尺寸$p$1.0 μmQuad Bayer 等效 2.0μm
量子效率QE~80%@550nm绿光峰值
满阱容量FWC~6000 e⁻1.0μm 像素
读出噪声RN~2.0 e⁻ RMS暗噪声底
动态范围DR~70 dB单帧 HDR 可扩展至 120dB+

B3 主摄Sensor 完整规格

项目规格备注
有效像素50.3MP(8064×6240)Quad Bayer 排列
靶面尺寸1/1.56"(8.69×6.52mm)对角 10.86mm
像素尺寸1.0 μm(等效 2.0μm)4合1 Binning 后
ShutterRolling Shutter全像素模式
PDAF全像素 PDAFAll Pixel Auto Focus
MIPI4-Lane D-PHY, 2.4Gbps/Lane最高 9.6Gbps 总带宽
输出格式RAW10 / RAW12Quad Bayer 或 重排Bayer
全像素帧率30fps @ 50MP4Lane 全速
Binning帧率120fps @ 12.5MP4in1 Binning
HDR内置 DOL-HDR2/3曝光合成,120dB+
AVDD2.8V模拟域
DOVDD1.8VMIPI I/O
DVDD1.1V数字核心
工作温度-30°C ~ +85°C工业级

B4 多路 Sensor 对比

Sensor位置靶面像素快门特点
主摄Sensor头部主摄1/1.56"50MP/1.0μmRS旗舰级,Quad Bayer,全像素PDAF,HDR
广角Sensor头部广角1/2"8MPRS超广角,低成本,SmartSens 国产
腕部Sensor腕部(左/右)1/2.8"1MP(1280×800)GS全局快门,无果冻,高速抓拍 ✓
感知Sensor感知(结构光)1/4"0.3MP(640×480)GS全局快门,NIR增强,低时延 ✓
选型逻辑:运动/抓取场景用 GS(全局快门)避免卷帘失真,高画质拍照/录像用 RS+大靶面,深度感知用专用 NIR 增强 Sensor + 结构光投影仪配对。

PART C  ISP 与 MIPI 接口

ISP Pipeline · AE/AWB/AF · MIPI CSI-2 带宽计算 · 电源时序

C1 ISP Pipeline 全流程

RAW 输入
BLC
BPC
LSC
Demosaic
AWB
CCM
Gamma
3DNR
Sharpening
YUV 输出
模块功能关键参数常见问题
BLC补偿暗电流偏置,使纯黑=0黑电平值(64@10bit)BLC 不准→画面底噪偏高
BPC检测并插值替换坏点坏点阈值,OTP坏点Map坏点过多→画质下降
LSC补偿边缘光量衰减和色偏增益LUT 17×17 GridLSC不准→四角暗,颜色不均
DemosaicBayer→全彩RGB插值算法(AHD/导向滤波)算法差→伪彩,锯齿
AWB调整R/B增益还原白色色温 2000K~8000KAWB失效→偏黄/偏蓝
CCM3×3矩阵校正色彩准确度目标 ΔE < 5CCM差→色彩不准
Gamma非线性映射,压高光拉暗部sRGB gamma 2.2Gamma不对→曝光感觉异常
3DNR时域+空域降噪强度/弱光自动增强过强→涂抹感,细节丢失
SharpeningUSM增强边缘强度+半径过强→振铃效应(边缘白边)

C2 AE / AWB / AF 原理

曝光值(EV)方程
$$EV = \log_2\!\left(\frac{N^2}{t}\right) = \log_2\!\left(\frac{L \cdot S}{K}\right)$$

$t$:曝光时间;$L$:场景亮度;$S$:ISO;$K$:标定常数(通常12.5)

AF 类型原理速度精度某机器人项目
PDAF相位差,像素级检测极快 <80ms主摄Sensor 全像素 PDAF ✓
CDAF对比度爬山慢 300~500ms高(稳定)备用/精对焦
TOF飞行时间极快中(cm级)外置辅助(可选)

C3 MIPI CSI-2 接口

特性D-PHYC-PHY
信号模式差分对 DP/DN三导线 Trio A/B/C
单Lane带宽最高 4.5Gbps(v2.1)等效 ~5.7Gbps/Trio
主摄Sensor4-Lane 2.4Gbps/Lane ✓不支持
优势生态成熟,调试简单相同Pin数更高带宽
MIPI 带宽需求计算
$$BW_{required} = W \times H \times fps \times bit\_depth \times 1.25\ \text{(8b10b开销)}$$

主摄Sensor全像素:8064×6240×30×10×1.25 ≈ 18.9 Gbps → 需 4Lane×2.4Gbps=9.6Gbps(实际可降帧率或用 RAW10 压缩)

CSI通路SensorLane数速率备注
CSI0主摄Sensor4-Lane2.4Gbps/LaneD-PHY,RAW10/12
CSI1广角Sensor2-Lane1.5Gbps/LaneD-PHY
CSI2腕部Sensor2-Lane800Mbps/LaneD-PHY,Left+Right 分时
CSI3感知Sensor1-Lane400Mbps/LaneD-PHY,低速

C4 电源供电与上电时序

主摄Sensor上电时序(简化) DOVDD t0 AVDD t0+1ms DVDD t0+2ms XCLR↑ t0+5ms → I2C 配置开始 t0+8ms
严重警告:DOVDD → AVDD → DVDD 顺序不能颠倒,且各步间隔 ≥ 1ms。掉电顺序相反(DVDD → AVDD → DOVDD)。XCLR 拉高前所有电源必须稳定。

C5 图像格式与带宽估算

Sensor 通过 MIPI 总线输出的数据格式决定 ISP 处理路径和传输带宽需求,是系统设计的关键参数。

Sensor RAW
Bayer 格式
ISP Demosaic
插值还原
RGB
全彩
YUV
色域分离
JPEG
有损压缩
格式原理优势劣势典型用途
RAW(Bayer) Sensor 直出,每像素只含 R/G/B 其中一色(RGGB排列,G占50%) 码率最低;保留全部原始信息,便于后期高质量处理 接收端需完成 Demosaic 插值运算 主摄直出,ISP 输入端,ProRaw 模式
RGB Demosaic 后每像素含完整 R/G/B 三通道(RGB888 = 24bit/pixel) 全彩信息完整 码率是 RAW 的 2.4×;RGB565 可节省至 16bit 算法处理中间格式,显示输出
YUV / YCbCr 亮度 Y + 色差 U/V 分离;YUV420 = 12bit/pixel(色差 2×2 共享) 人眼对亮度敏感,色度可降采样;YUV420 比 RGB888 省 50% 需 RGB→YUV 算法转换 视频编码(H.265/H.264)、AI 算法输入
JPEG 有损压缩,去除视觉冗余信息;压缩比通常 10:1 体积极小,便于传输和存储 不可逆有损,压缩率越高质量越低 静图拍照输出,低带宽传输

带宽计算实例(主摄Sensor)

格式分辨率帧率原始码率MIPI 需求(含8b10b)
RAW108064×624030fps8064×6240×30×10 ≈ 15.1 Gbps≈ 18.9 Gbps → 需 4Lane×2.4G
RAW10 Bin 4in14032×312030fps≈ 3.8 Gbps≈ 4.7 Gbps → 4Lane×1.2G 足够
RAW10 Bin 4in14032×3120120fps≈ 15.1 Gbps≈ 18.9 Gbps → 需全速 4Lane
RGB8882MP(1920×1080)30fps2MP×24×30 ≈ 1.44 Gbps≈ 1.8 Gbps → 2Lane 足够
YUV4202MP(1920×1080)30fps2MP×12×30 ≈ 0.72 Gbps≈ 0.9 Gbps → 1Lane 足够
JPEG(10:1压缩)2MP 静图1fps2M×24÷10 = 4.8 Mbit144 Mbps → 极低带宽
MIPI 带宽通用公式
$$BW_{MIPI} = W \times H \times fps \times bit\_depth \times 1.25 \div N_{lane}\ \text{(Gbps/Lane)}$$

其中 1.25 为 8b10b 编码开销(每8bit数据需10bit传输);Lane 数由硬件设计决定

关键结论:RAW 格式在相同图像质量下码率反而低于 RGB(无需每像素存三色),但接收端 ISP 计算量更大。JPEG 压缩是有损且不可逆的,量产调试阶段务必保留 RAW 输出能力,方便 ISP Tuning 和问题排查。

PART D  镜头组工艺

结构BOM · 注塑 · GMP玻璃模压 · AR镀膜 · Lens Stacking · MTF全检

D1 镜头组结构 BOM

层次零件材料功能
1前组 L1(凸)光学玻璃 / COP汇聚光线,决定FOV和进光量
2遮光片 Spacer-1黑色POM / 不锈钢防杂光串扰,定位间距
3中组 L2-L4COP / PMMA像差校正(球差/彗差/像散)
4光圈片 Aperture不锈钢蚀刻限制入射光束直径,控制光圈
5后组 L5-L7COP / 玻璃场曲校正,CRA匹配Sensor
6镜筒 Barrel铝合金 / 高温工程塑料固定各镜片相对位置
7压圈 Retaining Ring不锈钢锁紧最后一片,防松

D2 工艺总流程

原材料 IQC
注塑/GMP压型
退火
AR镀膜
单片检验
叠装Stacking
UV固化
MTF全检
BFL分Bin
出货OQC

D3 塑料镜片注塑

参数COP(环烯烃聚合物)PMMA(亚克力)
注射温度260~320°C220~260°C
模具温度100~130°C70~90°C
保压压力80~120 MPa60~100 MPa
退火70~90°C / 2~4h60~80°C / 1~2h
折射率 nd1.51~1.531.49~1.50
阿贝数 Vd56~5757~58
吸水率<0.01% ✓0.3~0.5% (差)
耐热 Tg170°C ✓105°C
为什么选 COP?手机相机 AA 工序需要 UV+热固化,环境温度达 150°C,PMMA 的 Tg 仅 105°C 会变形,COP 是标准选择。高端镜头前群用玻璃 GMP 保证环境可靠性。

D4 玻璃 GMP 模压

参数GMP模压传统研磨
成型温度500~650°C室温(机械)
模具材料SiC/WC + DLC涂层
面形精度PV < λ/4PV < λ/10
节拍30~120s/片数小时/片
适用非球面,大批量 ✓球面,小批/军工

D5 AR 镀膜

镀膜方式工艺温度适用基板单面反射率
电子束蒸发150~250°C玻璃< 0.3%
离子辅助沉积(IAD)<80°C ✓玻璃+塑料 ✓< 0.2%
磁控溅射室温~100°C玻璃+金属< 0.1%
典型7片镜头:无镀膜透过率约 75%,全面 IAD 镀膜后可达 95%+(每面损失 0.2%,7片14面总计约 2.8% 损失)。

D6 Lens Stacking 叠装

精度要求指标检测方法
偏心 Decenter≤ 5μm(相邻光轴偏移)干涉仪/自准直仪
倾斜 Tilt≤ 0.5'(角分)MTF四角均匀性
间距 Air Gap±10μm机械压差
洁净度Class 100(ISO 5)粒子计数器
UV胶固化365nm / 3000mJ/cm²固化后拉力 > 5N

D7 MTF 全检出货

检测项目Pass 标准不良处理
中心 MTF≥ 70% @ Nyquist/2报废
0.7F MTF≥ 50%报废
角落 MTF≥ 35%降级使用
BFL 后焦±20μm内分BinBin A/B/C分类,匹配VCM行程
透过率≥ 90%@400~700nm报废
畸变|D| ≤ 2%超差报废

PART E  模组组装工艺

SMT · COB · Wire Bond · Plasma · AA主动对准 · OTP标定 · 终测

E1 模组结构 BOM

层次零件功能
1镜头组(Lens Assembly)光学成像,决定 FOV/MTF/畸变
2VCM 音圈马达AF/OIS 驱动,行程 200~300μm(AF),见下方详解
3IR Cut Filter(IRCF)截止 650nm 以上红外,防止图像偏色
4Sensor Die(裸芯片)光电转换,成像核心
5基板 PCB/Ceramic芯片载体,SMT 无源器件 + Driver IC
6FPC 柔性板连接主板,传输 MIPI + I2C + AVDD/DVDD/IOVDD
7Shield CanEMC 屏蔽,机械保护

VCM 音圈马达详解

VCM(Voice Coil Motor)是模组中负责 自动对焦(AF)光学防抖(OIS) 的核心驱动部件。选型时需结合镜头规格和产品定位综合判断:

VCM 类型功能特点典型应用
仅 AFZ轴对焦结构简单,成本低,体积小中低端副摄,IoT 摄像头
AF + OISZ轴对焦 + X/Y防抖可降低手抖模糊,夜景/长焦画质更好旗舰主摄(主摄Sensor标配)
Zoom 马达多焦段光学变焦行程大(≥1.5mm),结构复杂高端长焦镜头(3×/5×/10×)
VCM 关键参数典型范围说明
控制模式开环 / 闭环(含霍尔传感器)闭环定位精度 ±1μm,开环成本低但需多次调整
推力(Force)40~150 gf越大对焦越快,可驱动更大光圈长焦镜头(60gf+ 用于大底主摄)
行程(Stroke)0.3~3 mm长焦镜头需 ≥1.5mm,常规主摄 0.3~0.5mm
响应时间5~20 ms旗舰 VCM <8ms,抓拍清晰的关键参数
OIS 防抖角度±0.5°~±1.5°角度越大夜景/长焦效果越好,夜景标配 ±1.0° 以上
封装尺寸4.5×3.0 ~ 5.2×4.2 mm尺寸越大推力越强,但整体模组厚度增加
驱动电压(AF-VCC)2.8V~5V主流 2.8V~3.3V,高推力马达可达 5V
I2C 地址0x0C ~ 0x18(7bit)与 Sensor 共用 I2C 总线时必须地址不冲突(DW9714 = 0x0C)
EEPROM 注意:模组 EEPROM 存储 OTP 校准数据(AWB/LSC/AF曲线/坏点Map),容量越大(64Kbit vs 2Kbit)校准精度越高。更换 VCM 或镜头批次后须重新烧录 OTP。
其他接口参数说明
TTL(Total Track Length)镜头顶端到 Sensor 感光面的总高度(mm)。TTL 越小模组越薄,手机旗舰主摄通常 5~7mm,IoT 设备 3~5mm
Sensor I2C 地址主摄Sensor 默认 0x1A(7bit=0x34),硬件 ID 引脚可切换,多摄时需确保地址无冲突
镜片规格标注5P = 5片塑料;1G4P = 1片玻璃+4片塑料;全G = 全玻璃。玻璃透光率高、抗畸变、耐高温,但成本显著更高

E2 SMT 贴片

工序设备关键参数检测
锡膏印刷全自动印刷机偏移 < 50μmSPI(3D锡量检测)
贴装高速贴片机精度 ±35μm(0402以下)视觉对位
回流焊10区氮气炉峰值 245°C/60s,SAC305无铅X-Ray虚焊检测
焊后检验AOI虚焊率 < 50 PPMAOI 100%全检

E3 COB 芯片贴装

参数要求备注
贴装精度±25μm XY,±0.5° θ影响AA行程余量
ESD防护操作台 < 1MΩ,人体 < 1MΩCMOS 100V即损坏
洁净度Class 1000(ISO 6)防粒子落Die
固化Underfill热固化 150°C/30min防COB脱落

E4 Wire Bonding

参数金线 Au铜线 Cu
线径17.5~25μm18~25μm
拉力≥ 3.0gf≥ 4.0gf
剪切力≥ 8.0gf≥ 10gf
成本高(约400元/g)低(约20元/g)
工艺难度高(防氧化气氛保护)

E5 Plasma 清洗 & IR Filter

4小时窗口规则:Plasma(O₂/Ar等离子体)处理后,表面活化态持续约 4 小时,必须在此窗口内完成 IR Filter 粘接,超时后表面重新吸附有机物,粘接力下降 30~50%,必须重新 Plasma。

E6 AA 主动对准

自由度调整范围精度
X / Y(侧移)±200μm±1μm
Z(对焦方向)±500μm±2μm
θx / θy(倾斜)±1°±0.01°
θz(旋转)±1°±0.01°
MTF验收最低合格优良目标
中心≥ 60%≥ 70%
0.7F≥ 45%≥ 55%
角落≥ 35%≥ 45%
均匀性≥ 55%≥ 65%
节拍优化:AA 工位是产能瓶颈。UV 预固化(3s)将镜头锁定位置后立即下线,热固化(150°C/30min)在离线烤箱批次处理,不阻塞主线,节拍目标 8~15秒/颗。

E7 OTP 标定

标定项目内容用途
AWBD65下 R/G/B增益ISP AWB初始值
LSC17×17 Grid增益LUTISP镜头阴影补偿
AFMacro/Infinity码值AF搜索范围初始值
PDAF相差增益偏差补偿相位差计算精度
坏点Map出厂坏点坐标ISP BPC固定坏点校正
模组SNLot/Date/Station质量追溯

E8 终测项目与异常处理

测试项目方法 / 设备Pass 标准常见异常根因 & 处理
MTF 解析力 ISO 12233 SFR Chart 中心 ≥60%,角落 ≥35%(参照E6) 角落 MTF 低,不均匀 AA 偏心/倾斜超差 → 返工重做 AA;镜头叠装 Tilt 过大 → 退换镜头
坏点检测 全暗图 + 全亮图扫描 单簇 ≤2px,总量 ≤5 坏点数量超标 Die 污染(Class 1000 失效)→ 洁净室排查;静电损伤 → 检查 ESD 接地;超标则报废
色彩 ΔE Macbeth 24色卡 / D65光源 平均 ΔE < 5 偏色,ΔE 偏大 AWB OTP 标定误差 → 重新标定;CCM 不准 → 重调 ISP CCM;光源色温不对 → 换D65标准光源
AF 对焦 10cm ~ ∞ 全程测试 100% 可对焦,行程完整 无法合焦 / 行程异常 VCM 卡死(异物) → 清洁或更换;OTP AF 码值错误 → 重烧 OTP;I2C 通信失败 → 检查地址/电压
MIPI 信号 Eye Diagram + BER 测试 BER < 1e-12,眼图张开 无图像 / BER 超标 Lane P/N 极性反 → 检查原理图;等长不满足 → PCB 布线整改;供电异常 → 确认上电时序
量产解像力(TVL) TV Line Chart 拍摄评估 中心 ≥ 额定分辨率 80% 解像力低于规格 镜头 BFL Bin 错配 → 重新分 Bin 并与 VCM 行程重新匹配;AA UV 固化后漂移 → 检查 UV 能量和固化时间
高低温循环 -20~+70°C × 10 cycle MTF 变化 < 5%,功能正常 高温后 MTF 下降,对焦偏移 塑料镜片(PMMA Tg 低)热变形 → 换 COP/玻璃;VCM 弹簧片疲劳 → 更换 VCM 型号
ESD 耐受 HBM 2kV 测试 功能正常,无性能退化 ESD 打坏 Sensor FPC 上 MIPI/I2C 线缺 ESD 保护器件 → 补 TVS 二极管;静电防护工位失效 → 检查接地
跌落 / 振动 1.5m 跌落 × 6面 / 随机振动 功能正常,MTF 变化 < 3% 跌落后合焦异常 / 画面模糊 VCM 弹片变形 → 增加跌落 Catch 功能;UV 胶固化不足(拉力不够) → 增加热固化
量产拦截策略:MTF + 坏点 + AF 是三大核心测试项,必须 100% 全检(不可抽检)。色彩 ΔE 和 MIPI BER 可按 AQL 抽检。高低温/跌落属可靠性验证,DVT 阶段全量,PVT 后按批次抽验。

PART F  某机器人项目 实际应用

6路相机架构 · 设计要点 · BUG记录 · 洁净度 · 常见不良

F1 六路相机系统架构

编号位置Sensor规格CSI功能
CAM0头部主摄主摄Sensor50MP/f1.8/1/1.56"CSI0 4-Lane高清拍照/视频,全像素PDAF
CAM1头部广角广角Sensor8MP/f2.2/1/2"CSI1 2-Lane超广视野,环境感知
CAM2腕部-左腕部Sensor1MP GS/f2.0CSI2 2-Lane手部追踪,抓取识别
CAM3腕部-右腕部Sensor1MP GS/f2.0CSI2(分时)手部追踪,抓取识别
CAM4感知-正面感知Sensor0.3MP GS/NIRCSI3 1-Lane结构光深度,人脸识别
CAM5感知-侧面感知Sensor0.3MP GS/NIRCSI3(分时)避障感知

F2 关键设计要点

  • 主摄Sensor MIPI 差分对:等长 ±5mil,包地,远离 RF 天线区域,阻抗 100Ω差分
  • 所有相机 DOVDD=1.8V 需满足同时工作电流,建议独立 LDO 供每路 Sensor
  • XCLR(复位信号)必须单独 GPIO 控制,不可共用,防同步复位
  • FPC 走线:屏蔽层接地,双面包地,90Ω差分阻抗控制
  • VCM驱动IC(DW9714)与主摄Sensor共用 I2C(CCI),地址 0x0C(主摄Sensor)/ 0x0C(DW9714 7bit=0x18)
  • 感知Sensor DOVDD 可降至 1.5V,建议与主摄Sensor供电域物理隔离
  • 腕部Sensor FPC 需考虑弯曲半径 ≥ 1.5mm,防断路

F3 BUG 记录(设计问题)

BUG ID描述严重性状态
BUG-C561C561/C396/C568/C393/C398 耐压不足,应选 25V严重待 Layout 更换
W-USB-CCUSB CC 引脚保护方案待确认警告待确认
I-12V-01P33 PVDD_12V 与 VDD12V 连接关系待手动确认警告待处理
I-PG-01AP_PM_PG_3V3 来源待确认警告待处理
BUG-DVDD感知Sensor DOVDD 1.5V 疑虑已关闭感知Sensor 支持 1.5V ✓

F4 洁净度管控

工序洁净度管控措施
Sensor Die 贴装Class 1000(ISO 6)洁净服,N₂吹扫,防静电地板
Lens StackingClass 100(ISO 5)层流罩,棉签拭镜,离子风枪
IR Filter 贴合Class 100(ISO 5)Plasma后4h内完成
AA 主动对准Class 1000(ISO 6)密封操作台,腔体N₂吹扫
终测Class 10000(ISO 7)一般洁净室即可

F5 常见不良与对策

不良现象可能原因对策
黑点/白点(坏点)Die污染,静电损伤洁净度管控,OTP坏点Map修复
角落MTF低镜头偏心/倾斜,CRA不匹配检查叠装精度,重新AA
暗角(Shading)CRA不匹配,像圈太小更换镜头,调整LSC参数
画面有雾(Haze)镜片内霉菌,镀膜脱落温湿度管控,加速老化筛选
AF无法合焦VCM卡死,OTP错误检查VCM I2C,重烧OTP
色彩偏差AWB标定误差,CCM差重新OTP标定,校准ISP CCM
果冻效应 JelloRS Sensor + 高速运动改用 GS Sensor(腕部/感知)
MIPI 无图像极性反,时序错,供电异常示波器检查 CLKP/CLKN,确认上电时序

附录  术语 & 缩写全集

80+ 缩写 · A光学 · B Sensor · C ISP · D接口 · E工艺 · F色彩

A 光学类

缩写全称中文说明
EFLEffective Focal Length有效焦距光学系统等效焦距,单位mm
BFLBack Focal Length后焦距最后镜片后表面到焦点距离,AA时分Bin依据
TTLTotal Track Length总长第一片前顶到Sensor距离,手机镜头<6mm
FOVField of View视场角H/V/D,2×arctan(S/2f)
DOFDepth of Field景深合焦清晰范围,短焦/小光圈/远距离景深深
HFDHyperfocal Distance超焦距H=f²/(N×CoC),超焦距以外全清晰
CoCCircle of Confusion弥散圆失焦点弥散直径,≈2×像素尺寸
MTFModulation Transfer Function调制传递函数描述各频率对比度传递能力
CRAChief Ray Angle主光线角主光线与光轴夹角,随像高增大
f/#f-number光圈数焦距/入瞳直径,越小进光量越大
T-stopTransmission stop透射光圈考虑实际透过率:T=f/√τ
NANumerical Aperture数值孔径NA=n×sinθ,显微镜/投影常用
D-FOVDiagonal FOV对角视场角靶面对角线方向的视场角
MLAMicro Lens Array微透镜阵列Sensor表面聚光层,需与CRA匹配

B Sensor 类

缩写全称中文说明
FSIFront-Side Illumination前照式金属层在上,感光效率~65%
BSIBack-Side Illumination背照式感光层翻转,效率~90%
GSGlobal Shutter全局快门全部像素同时曝光,无果冻
RSRolling Shutter卷帘快门逐行扫描,运动产生果冻
QEQuantum Efficiency量子效率光子→电子转化率(%)
FWCFull Well Capacity满阱容量像素最大可存储电子数(e⁻)
RNRead Noise读出噪声暗态读取噪声底(e⁻ RMS)
DRDynamic Range动态范围DR=20log(FWC/RN) dB
SNRSignal-to-Noise Ratio信噪比信号与噪声的比值(dB)
PDAFPhase Detection AF相位差对焦像素级相位检测,<100ms
NIRNear Infrared近红外700~1000nm,结构光常用
HDRHigh Dynamic Range高动态范围多曝光合成,主摄Sensor最高120dB+
DOL-HDRDigital Overlap HDR数字合成HDRSony多曝光合并模式
PDPhoto Diode光电二极管像素内感光元件

C ISP 类

缩写全称中文说明
ISPImage Signal Processor图像信号处理器RAW→YUV/RGB全流程处理器
BLCBlack Level Correction黑电平校正补偿暗电流偏置
BPCBad Pixel Correction坏点校正检测并插值替换坏点
LSCLens Shading Correction镜头阴影校正补偿边缘光量衰减,17×17 LUT
AWBAuto White Balance自动白平衡自动还原白色,2000K~8000K
CCMColor Correction Matrix色彩校正矩阵3×3矩阵修正色彩,目标ΔE<5
AEAuto Exposure自动曝光控制曝光时间+增益
AFAuto Focus自动对焦调整镜头位置使图像清晰
NRNoise Reduction降噪时域+空域,3D NR
OTPOne-Time Programmable一次性可编程出厂标定数据存储(AWB/LSC/AF/PDAF)
OISOptical Image Stabilization光学防抖镜头/Sensor位移补偿抖动
LDCLens Distortion Correction畸变校正软件校正几何畸变
EISElectronic Image Stabilization电子防抖裁切图像做运动补偿
USMUnsharp Mask非锐化蒙版锐化算法,过强产生振铃

D 接口类

缩写全称中文说明
MIPIMobile Industry Processor Interface移动处理器接口手机相机/显示接口标准联盟
CSI-2Camera Serial Interface 2相机串行接口MIPI相机协议
D-PHY差分PHYMIPI物理层,差分对,生态成熟
C-PHYC-PHYMIPI物理层,三线Trio,带宽更高
CCICamera Control Interface相机控制接口I2C兼容,控制Sensor寄存器
VCMVoice Coil Motor音圈马达AF驱动,行程200~300μm
AVDDAnalog VDD模拟供电Sensor模拟电路,通常2.8V
DOVDDDigital Output/IO VDD数字I/O供电MIPI接口电平,通常1.8V
DVDDDigital VDD数字核心供电Sensor数字核心,通常1.1V
FPCFlexible Printed Circuit柔性印刷电路板连接模组与主板
AAActive Alignment主动对准六轴实时调整镜头-Sensor位置工艺
XCLRExternal Clear/Reset外部复位信号Sensor硬件复位,低有效

E 工艺类

缩写全称中文说明
GMPGlass Molded Press玻璃模压加热至软化点后模具压型非球面
COPCyclic Olefin Polymer环烯烃聚合物高透光率光学塑料,低吸水,Tg=170°C
PMMAPolymethyl Methacrylate聚甲基丙烯酸甲酯亚克力,低成本,吸水率高
ARAnti-Reflection增透膜多层膜降低反射率至<0.3%/面
SMTSurface Mount Technology表面贴装技术无源器件回流焊工艺
COBChip On Board板上芯片裸Die直接贴装在PCB
IQCIncoming Quality Control来料质量控制原材料进料检验
OQCOutgoing Quality Control出货质量控制成品出货检验
AOIAutomated Optical Inspection自动光学检测SMT后焊点检查
SPISolder Paste Inspection锡膏检测印刷后3D锡量检测
CpkProcess Capability Index工序能力指数Cpk>1.33为合格工序
EVTEngineering Validation Test工程验证测试样品阶段
DVTDesign Validation Test设计验证测试小批量设计验证
MSDMoisture Sensitive Device湿敏器件SMT开封后有效期管控

F 色彩类

缩写全称中文说明
CCTCorrelated Color Temperature相关色温光源色温(K),D65=6500K
D65CIE Standard Illuminant D65D65标准光源6500K日光,AWB最常用参考
WBWhite Balance白平衡使白色呈现中性白
ΔEColor Difference CIELAB色差ΔE<3人眼基本不可分辨
sRGBStandard RGB标准RGB最常用RGB色彩空间,Gamma 2.2
YUV亮度-色差Y=亮度,U/V=色差,ISP输出常用
MacbethMacbeth ColorChecker麦克白色卡24色标准色卡,色彩测试工具
CIECommission Internationale de l'Eclairage国际照明委员会色彩科学国际标准
RAWRaw Image Data原始图像数据Sensor直出Bayer格式,未经ISP处理
BayerBayer Pattern拜耳排列RGGB/GRBG等滤色片排列方式
← 返回工具箱