单像素成像的本质,可以概括为“用时间换空间”:通过一系列预设编码图案对目标场景进行光场调制,把二维空间光场信息映射为一维时序光强信号,由无空间分辨能力的单像素探测器采集,最终通过计算重建二维图像。
从早期随机二值掩模,到如今常用的Hadamard基、傅里叶基,再到深度学习优化矩阵,不同调制矩阵在信息效率、硬件实现难度、抗噪性和欠采样表现上各有优劣。因此,不存在适用于所有场景的“万能最优”调制矩阵,只有与应用场景需求、硬件系统条件深度匹配的选型方案。
判断一种调制矩阵是否适配目标场景,可从五个维度评估。
1. 正交性与信息效率
正交基各次测量之间信息不冗余,理论信噪比最优,重建可通过逆变换直接求解;非正交基存在信息重叠,相同测量次数下有效信息量更低,重建信噪比存在天然短板。
2. 硬件适配性
调制矩阵的数值特性是否匹配调制器件的工作模式。例如DMD具有二值化特性,适合使用0/1矩阵,不能直接套用高斯随机矩阵。
3. 抗噪声鲁棒性
不同调制矩阵对探测器噪声、环境光干扰的耐受能力不同,这在弱光、长积分时间场景中尤为关键。
4. 重建计算复杂度
部分调制矩阵可通过快速变换实现毫秒级重建,如Walsh-Hadamard变换、逆傅里叶变换;部分则依赖迭代优化算法,计算量差异可达数个数量级。
5. 欠采样适配能力
在压缩感知框架下,不同调制矩阵的低采样率重建表现差异显著,这也直接关系到成像速度的提升空间。
目前单像素成像领域应用最广泛的三种光场调制矩阵,分别是Hadamard基、傅里叶基与随机二值掩模。三者各有技术侧重与适用边界。
1. Hadamard基:高精度成像的工业标准
Hadamard基是目前单像素成像领域最成熟、应用最广泛的编码方案。其本质是由+1、-1元素构成的正交方阵,任意两行/列内积为0,具备理论最优的信息利用率。
核心特性:
正交性带来信噪比优势。各次测量完全独立,无冗余信息。相同测量次数下,Hadamard基重建信噪比显著高于非正交基,是高精度定量测量的首选。
差分调制适配DMD二值特性。DMD仅能输出0/1二值状态,无法直接表示Hadamard矩阵的-1值。工程上通过差分调制解决:将每个Hadamard图案拆分为正图案(保留+1区域)与负图案(保留-1区域),两次测量值相减即可等效实现±1调制。该方案虽然测量次数翻倍,但能有效抵消环境光直流分量,进一步提升信噪比。
Walsh序与自然序的选择。自然序Hadamard矩阵由递归生成,频率排列不按有序分布,直接用于成像易出现边缘振铃伪影;Walsh序Hadamard矩阵按图案过零点数从低到高排列,频率由低频到高频有序分布,更符合自然图像的能量分布规律,尤其在欠采样场景下表现远优于自然序,是工程应用的默认选择。
优势:正交性好、信噪比高、重建算法简单,可通过快速Walsh-Hadamard变换实现,硬件适配方案成熟。
局限:差分调制使测量次数翻倍;图像分辨率需匹配2的幂次,灵活度有限。
适用场景:高精度静态成像、定量光学测量、全采样高保真成像、弱光成像。
2. 傅里叶基:快速欠采样的首选方案
傅里叶基基于频域编码思路,通过不同频率、不同相位的正弦条纹图案进行调制,直接测量场景的傅里叶频谱系数,最终通过逆傅里叶变换重建图像。
核心特性:
四步相移法获取复数频谱。单次强度测量只能获取幅度信息,丢失相位。工程上通过四步相移法,对同一频率依次投影相位为0、π/2、π、3π/2的四幅条纹,通过测量值组合解算出该频率点的复傅里叶系数,即实部+虚部。
低频优先的欠采样策略。自然图像大部分能量集中在低频区域,高频主要贡献边缘细节。因此无需全采样所有频率点,采用圆形采样、对数采样等策略,保留低频、稀疏采样高频,即可用远少于全采样的次数获得可用重建结果。这是傅里叶基最核心的速度优势。
二值化适配方案。针对DMD的二值特性,可通过脉冲宽度调制(PWM)模拟灰度条纹,或采用二值化傅里叶条纹配合算法校正,在速度与精度之间取得平衡。
优势:天然适配欠采样,成像速度可灵活调整;频域物理意义清晰,便于结合先验知识优化采样策略。
局限:四步相移增加测量开销;二值化近似会引入高频误差;高频细节损失明显。
适用场景:快速成像、低采样率实时成像、以大尺度结构为主的目标检测与识别。
3. 随机二值掩模:压缩感知研究的基础载体
随机二值掩模是最简单的编码方案:每个像素点随机取0或1,生成无特定规律的二值散斑图案。
核心特性:
优势:生成简单、无分辨率限制、适配压缩感知理论框架、适合动态自适应采样。
局限:非正交导致信噪比低;重建依赖迭代算法,计算复杂度高;结果稳定性相对较差,对噪声和采样策略更敏感。
适用场景:压缩感知算法研究、自适应采样实验、快速原理验证原型。
调制矩阵的理论性能最终需要通过硬件实现,空间光调制器的参数直接决定编码方案的落地效果。DMD凭借高速二值调制特性,是目前单像素成像的主流调制器件。其关键参数与调制矩阵性能的对应关系如下。
1. 调制帧率:决定成像速度上限
Hadamard全采样需要数万次图案切换,傅里叶相移需要多次图案迭代。调制帧率越高,单帧成像总耗时越短。以飞光科技F4320 DDR 0.7 XGA超高速数字微镜空间光调制器为例,在1024×768分辨率下二进制满幅帧率最高可达30000Hz,局部开窗模式下帧率可达60000Hz,帧频行业领先,可大幅缩短长序列编码采集时间,支撑傅里叶高速相移、Hadamard快速全采样等多种方案落地。
2. 缓存容量:决定长序列采样的稳定性
高分辨率全采样的调制矩阵序列数据量极大。例如256×256分辨率的Hadamard基对应65536张图案,对设备缓存容量提出很高要求。若缓存不足,只能分批次传输图案,会引入时序抖动,影响测量精度。飞光科技超高速系列DMD配备最大256Gbit的DDR3板载缓存,超大容量系列更搭载SSD阵列实现TB级存储,可完整预存全量编码图案序列,保证播放过程时序稳定无中断,避免实时传输的延迟与误差。
3. 同步精度:决定差分/相移测量的准确性
差分Hadamard调制、傅里叶四步相移都要求DMD图案切换与探测器采集严格同步。时序偏差会直接导致测量值错位,引入系统误差,降低重建信噪比。飞光科技全系列DMD均配备2路5.0V输出触发IO与1路5.0V输入触发IO,可直接对接数据采集卡与探测器,实现“图案稳定→触发采集”的精准时序配合,是高精度编码方案落地的核心保障。
4. 实时传输能力:支撑动态编码研究
对于自适应采样、动态编码等前沿研究,无法依赖预存图案,需要高速接口实时传输调制图案。飞光科技DMD支持千兆以太网、万兆以太网、PCIe 80Gb等多种接口方案,支持缓存模式与实时模式两种工作模式,可满足从常规实验到高速动态编码的全场景需求。
编码矩阵的选型、硬件适配、同步调试,是单像素成像系统落地的主要门槛。从零搭建往往需要数月调试周期。
飞光科技提供成熟的单像素成像系统解决方案,已完成Hadamard基、傅里叶基、随机二值掩模等主流编码方案的硬件适配与算法联调,配套压缩感知等重建算法,覆盖主动照明与被动接收两种光路架构。用户无需额外采购元器件、调试光路同步、适配编码方案,开箱即可开展实验,将精力集中在算法创新与应用探索上。
针对特殊波段、特殊分辨率的定制化需求,飞光科技同时支持非标光电系统定制,提供从光学设计、硬件集成到算法适配的全流程服务。
单像素成像的技术演进,始终是编码方案、硬件器件、重建算法三者协同迭代的过程。选对适配场景的调制矩阵,搭配性能可靠的调制硬件,才能最大化发挥单像素成像在宽光谱、高灵敏度方向的核心优势。
面向未来,随着编码更智能、器件更高速、算法更轻量,单像素成像将加速从实验室走向工程现场,在弱光、高速、不可见光与极端环境中不断拓展人类感知的边界。
📩欢迎咨询产品详情与试用申请:
电话/微信:+86 18158383686(洪先生)
+86 18067615758(程先生)
公司地址:浙江省 金华市 婺城区 秋滨街道石城街399号海棠小微创业园12幢4楼
邮箱:jiejie.hong@fldiscovery.com
官网:https://www.fldiscovery.com