通过基于光学记忆效应的解卷积方法,我们可以实现薄散射介质后物体的成像恢复。但是,单个光学记忆效应范围受到散射介质厚度的限制,成像的视场非常狭小,不利于实际应用。本文中,我们展示了两种通过散射介质实现大视场成像恢复的方法,即前人提出的基于不同区域点扩散函数的去相关性和我们提出的不同区域散斑的独立获取方法,实验结果表明这两种方法对超过单个记忆效应范围的物体进行散射成像恢复效果良好。 By deconvolution method based on optical memory effect, we can realize the image restoration of objects through thin scattering medium. However, the range of single optical memory effect is lim-ited by the thickness of scattering medium, and the field of view is very narrow, which is not con-ducive to practical application. In this paper, we show two methods to achieve large field of view imaging recovery through scattering media, the decorrelation based on point spread function in different regions and the independent acquisition of speckle in different regions. The experimental results show that both methods are effective for scattering imaging recovery of objects beyond the range of single memory effect.
通过基于光学记忆效应的解卷积方法,我们可以实现薄散射介质后物体的成像恢复。但是,单个光学记忆效应范围受到散射介质厚度的限制,成像的视场非常狭小,不利于实际应用。本文中,我们展示了两种通过散射介质实现大视场成像恢复的方法,即前人提出的基于不同区域点扩散函数的去相关性和我们提出的不同区域散斑的独立获取方法,实验结果表明这两种方法对超过单个记忆效应范围的物体进行散射成像恢复效果良好。
散射成像恢复,解卷积,光学记忆效应,大视场成像
Yue Cao, Yu Xin*, Qi Zhao
School of Electronic and Optical Engineering, Nanjing University of Science and Technology, Nanjing Jiangsu
Received: Oct. 12th, 2020; accepted: Oct. 27th, 2020; published: Nov. 3rd, 2020
By deconvolution method based on optical memory effect, we can realize the image restoration of objects through thin scattering medium. However, the range of single optical memory effect is limited by the thickness of scattering medium, and the field of view is very narrow, which is not conducive to practical application. In this paper, we show two methods to achieve large field of view imaging recovery through scattering media, the decorrelation based on point spread function in different regions and the independent acquisition of speckle in different regions. The experimental results show that both methods are effective for scattering imaging recovery of objects beyond the range of single memory effect.
Keywords:Scattering Imaging Recovery, Deconvolution, Optical Memory Effect, Large FOV Imaging
Copyright © 2020 by author(s) and Hans Publishers Inc.
This work is licensed under the Creative Commons Attribution International License (CC BY 4.0).
http://creativecommons.org/licenses/by/4.0/
一直以来,光学成像都是人类采集事物信息的重要手段之一,但是如何克服散射影响进行光学成像恢复仍然是限制人类社会活动的重要科学问题 [
解卷积和解自相关方法都基于散斑相关这一原理 [
散斑相关成像技术的物理基础和依赖的关键是光学记忆效应。Feng和Freund等研究表明:当前后两束光束入射到散射介质同一位置上,且入射角差很小时,探测器上接收的散斑仅仅是对应入射角方向整体平移了一段距离,这种现象被称为光学记忆效应。光学记忆效应的范围可以通过计算散斑之间的相关函数来获得,表达式为:
C ( q L ) = [ q L / sinh ( q L ) ] 2 (1)
其中,q = 2π∆θ/λ,λ为入射光的波长,∆θ为转动角度,L为散射介质的厚度。记忆效应的有效角度范围随着散射介质厚度的增加而减小,最大角度∆θ约为λ/2πL。而当目标物体和散射介质距离确定时(设为u),目标尺寸∆x满足:
Δ x u ≈ 2 Δ θ (2)
由于∆θ最大为λ/2πL,因此在散射成像中,目标物体的尺寸局限于:
Δ x ≤ u λ π L (3)
图1为光学记忆效应范围的示意图。
图1. 光学记忆效应范围示意图
由于光学记忆效应的存在,散射介质所在光学系统可以看作是具有移位不变性的点扩散函数(PSF)的非相干成像系统。在记忆效应范围里,整个成像过程可以表示为散射成像系统的PSF和物体光强分布的卷积,可以由下式表示:
I ( x i , y i ) = F ( x i , y i ) ∬ P S F ( x i , y i ; x o , y o ) O ( x o , y o ) d x o d y o (4)
式中,下标i和o分别表示像平面和物平面,F(.)表示形状因子函数,即为放在焦平面上限制视场角的光阑。上式可以用卷积的形式简写为:
I = F ⋅ ( O ∗ P S F ) (5)
因此,当忽略F函数,在记忆效应范围内,我们可以将整个成像系统视作一个黑盒子,如果检测或估计了薄散射介质的PSF后,即可用解卷积运算 O ≈ d e c o n v ( I , P S F ) 来重建物体的图像 [
F { O } = F { P S F } * | F { P S F } | 2 + S N S O F { I } (6)
式中: S N = | F { N } | 2 为噪声N的功率谱; S O = | F { O } | 2 为未退化图像的功率谱。而噪声的功率谱和未退化图像的功率谱不一定能获得,所以我们通常把它设为常数项,即 S N S O = 1 R S N ≈ k ,其中 R S N 是信噪比,k值取决于实验条件适当的选择。这样,在获取到散射系统的散斑信息以及对应的点扩散函数信息后,我们就可以利用维纳解卷积滤波算法实现单个记忆效应范围内物体的重建。
对于处于单个记忆效应范围里的物体,我们可以通过测量物体的散斑以及对应的此记忆效应范围的PSF,利用维纳解卷积滤波算法,实现物体的重建。
实验中我们采用非相干光照明的方式,当物体尺寸超过单个记忆效应范围时,物体产生的总散斑可以看作处于不同记忆效应范围的子物体产生的散斑复合响应,用公式表示为:
I = ∑ m I m = ∑ m O m ∗ P S F m (7)
式中,Im和Om表示不同区域的散斑像和子物体光强分布,I为总的散斑像。
由于散射介质复杂随机的结构,当物体超过单个记忆效应范围时,像面也是产生独立均匀分布的散斑图案。而对于两个距离超过单个记忆效应范围的点来说,他们所产生的散斑图案(即PSF)是完全不相干的,用公式可以表示为:
P S F m ⋆ P S F n ≈ { 0 m ≠ n δ m = n (8)
其中,‘ ⋆ ’表示互相关操作。将不同区域的PSF与总散斑进行互相关操作,得到:
I ⋆ P S F n = ∑ m ( O m * P S F m ) ⋆ P S F n = ∑ m ≠ n ( O m * P S F m ) ⋆ P S F n + ( O n * P S F n ) ⋆ P S F n (9)
式中 m ≥ n 。根据不同区域PSF的去相干性,等式右边第一项就约为0,而第二项等于对应区域的子物体的分布,上式就可以简化为:
I ⋆ P S F n ≈ O n + C (10)
其中,C为噪声项, P S F n 和 O n 分别代表对应区域的点扩散函数和子物体分布。通过采集不同区域的PSF可以从总散斑图中重建对应区域的物体,可以用下式来表示:
O n = d e c o n v ( I , P S F n ) (11)
利用维纳滤波解卷积算法,就可以实现不同区域的子物体的重建。最后把重叠区域加权平均,将不同位置的恢复结果合成在同一张图上,即可实现透过散射介质对大视场目标的恢复。
不同于基于不同区域PSF的去相关性原理的方法,我们把大视场的物体看作是几个不同部分的组合,通过对大视场物体进行逐区域扫描,获得物体不同区域的散斑。在散射介质固定的情况下,先用针孔采集视场中心的PSF,然后把物体的不同部分移动到视场中心,通过光阑控制入射光的尺寸分别对不同部分物体成像,获得其对应的散斑图。之后利用采集的PSF与不同部分物体的散斑解卷积,就可以得到对应的恢复图。最后把不同部分的恢复结果拼接起来,就实现了透过散射介质对大视场目标的恢复。用公式可以表示为:
O = ∑ n O n = ∑ n d e c o n v ( I n , P S F ) (12)
其中,O为待恢复的大视场目标,On为目标的不同部分。同样的,利用维纳滤波解卷积算法,对实验结果进行拼接,即可实现透过散射介质对大视场目标的成像恢复。
我们采用两种光路结构来实现大视场目标的散射成像恢复。首先我们设计了用于采集PSF的实验光路,如图2所示。我们采用氦氖激光器作为光源,通过旋转的磨砂玻璃把入射光调制为非相干光,然后经过焦距为200 mm的透镜准直为平行光;随后光束经过一个孔径光阑,用于控制光束的尺寸照射在目标上,提高信噪比。为了采集PSF,我们的目标选用100 μm的针孔,将它放置在位移台上用于采集不同区域的PSF。散射介质(毛玻璃,圆形光漫射器)放置在距离针孔200 mm处,用sCMOS接收散斑,将它放置在散射介质100 mm处。
然后,我们将分辨率板放置在光路中,用于替代针孔的位置,其他的器材均不用移动,用于采集不同区域目标散斑。如图3所示。
图2. 采集不同PSF的实验系统图
图3. 采集不同区域目标散斑实验系统图
对于基于不同区域PSF的去相关性方法,我们用框架图来阐述,如图4所示。
图4. 基于不同区域PSF的去相干性方法的框架图
首先我们用图3所示的光路来获得大视场物体的总散斑图,通过调节孔径光阑,来控制入射光仅照射在选中的物体上。然后,用图2所示的光路来获取视场中心的PSF。之后用维纳滤波解卷积的算法得到中心PSF的恢复结果,如图5所示。
图5. 中心PSF图像恢复结果
其中,中心PSF恢复结果比例尺为50像素。而我们的sCMOS像素尺寸为5.04 μm,所以,依据中心PSF恢复的结果,通过图2的实验系统,我们以2 mm的步长移动针孔,采集对应区域的PSF。之后将获得的不同区域PSF与总散斑图进行维纳滤波解卷积,最后将不同区域的重建结果按照实际目标各个部分的距离拼接起来,重叠的部分进行加权平均,得到的结果如图6所示。
图6. 基于不同区域PSF的去相干性大视场成像恢复结果
图7. 不同区域散斑独立获取的框架图
从重建的结果可以看出,基于不同区域PSF的去相干性方法应用于大视场目标成像恢复,虽然存在着噪声和伪影,但是重建物体的对比度较好,恢复的效果也比较清晰。
对于不同区域散斑独立获取的方法,同样的,我们制定其对应的框架图。如图7所示。
我们先用图2的光路测得中心视场的PSF,即图4中的中心PSF图。之后,通过控制光阑采用合适的尺寸,以最大的目标即右上角的目标物三竖的尺寸作为光阑尺寸,仅仅照射部分目标,比如数字5,然后依据已知的各个部分之间的间隔将分辨率板移动相应的距离,将下一个待成像的部分移动到视场的中心成像,得到的散斑分别与测得的中心PSF进行解卷积恢复出对应的子物体,最后将它们拼接起来,重叠的部分进行加权平均,得到的结果如图8所示。
图8. 不同区域散斑独立获取的成像恢复结果
本文通过基于不同区域PSF的去相关性和不同区域散斑的独立获取这两种方法,实现了透过大视场散射介质的成像恢复,解决了单个记忆效应范围成像视场狭窄的问题,提高了成像视场的范围,对超过单个记忆效应范围的物体成像恢复的效果明显。其中,不同区域散斑的独立获取这种方法相较于基于不同区域PSF的去相关性方法,恢复的效果更好,成像的细节更为清晰。从理论上分析,基于不同区域PSF去相关性的方法是采集不同区域的PSF与物体总散斑进行解卷积来恢复,这就会导致待成像目标部分的恢复效果会受到物体其他部分散斑的影响形成噪声,而对于不同区域散斑的独立获取的方法,由于不同区域形成的散斑是独立获取的,因此不存在其他部分对其恢复效果的影响。从实验流程中分析,前者是通过移动针孔来采集不同区域的PSF,后者是移动目标物体(分辨率板)到视场中心来采集其对应不同部分的散斑,实验的复杂程度相当。但是,后者光阑的尺寸是小于前者的,所以后者的恢复信噪比更高,效果更好。但是基于不同区域PSF的去相关性方法也是有其独特优势的,当实际物体无法被移动或者难以准确移动确定距离时,这种方法就有很好的适用性。我们的研究为透过散射介质大视场成像恢复提供了有效的解决手段,拓宽了成像视场的范围。
我们的研究得到了国家自然科学基金(61675098,61107011)的支持。
曹玥,辛煜,赵琦. 基于解卷积透过散射介质大视场成像恢复方法 Large Field of View Imaging Restoration Method Based on Deconvolution through Scattering Media[J]. 现代物理, 2020, 10(06): 113-120. https://doi.org/10.12677/MP.2020.106013