光学仪器  2024, Vol. 46 Issue (4): 22-28   PDF    
基于压缩全息的散射介质中三维粒子定位
葛洲, 朱靖远, 周文静, 于瀛洁     
上海大学 机电工程与自动化学院,上海 200444
摘要: 在三维空间中,粒子作为物质分布的基本单元,其精确定位对于医疗、环境监测、燃烧过程分析以及航空航天研究等领域至关重要。然而,散射介质中的粒子检测常面临分辨率不足和定位难的问题。因此开发了一种新的检测技术,该技术基于自动聚焦压缩全息原理,融合了压缩传感与自动对焦机制,有效提升了重建图像的轴向分辨率和粒子检测的准确性。通过模拟和实验测试,该技术的轴向分辨率误差小于3 μm,确保了优异的检测精度。实验数据进一步证实,与传统的角谱法相比,本技术在观察散射介质中微粒的三维分布和评估粒子直径方面具有明显优势。本研究成果为相关领域的科学研究和实际应用提供了一种创新的技术途径。
关键词: 粒子定位    数字全息    压缩传感    散射介质    自动聚焦    
Three-dimensional particle localization in scattering medium based on compressive holography
GE Zhou, ZHU Jingyuan, ZHOU Wenjing, YU Yingjie     
School of Mechatronic Engineering and Automation, Shanghai University, Shanghai 200444 , China
Abstract: As the fundamental units of matter distribution in three-dimensional space, particles hold significant research value in the fields of medicine, environmental monitoring, combustion analysis, and aerospace research. However, detecting particles in scattering media often faces challenges such as low resolution and difficulties in localization. This study introduces a novel detection method based on autofocus compressed holography, which integrates compressed sensing and autofocus techniques to significantly enhance the axial resolution of reconstruction and the accuracy of particle detection. Through simulation and experimental validation, this method had demonstrated an axial resolution error of less than 3 μm, ensuring excellent detection precision. Experimental results further confirmed that, compared to traditional angular spectrum methods, this technology offered distinct advantages in observing the three-dimensional distribution of particles in scattering media and in assessing particle diameters. The research outcomes provide an innovative technical approach for scientific research and practical applications in the related fields.
Key words: particle localization    digital holography    compressed sensing    scattering medium    autofocusing    
引 言

在我们的生活中,粒子无处不在,如沙土、粉尘、雨滴、血细胞等。在生物医学领域,红细胞的计数是评估患者健康状况的关键指标,细胞的浓度对于精确控制所需化学物质的用量至关重要[1]。工业生产中,通过检测燃烧后产生的颗粒尺寸,可以判断燃料是否完全燃烧[2]。社会生活中,基于光散射的粒度分析可以改善许多行业产品的质量控制,包括制药、食品、化妆品等[3]。因此,对粒子的研究具有重大的科学意义及广阔的应用前景。

已提出的光学粒子测量方法主要有激光多普勒测量法、激光衍射测量法、数字全息法等[4]。其中,数字全息技术具有记录大景深、三维信息获取、可实时处理和分析等优点,在光学粒子测量中具有重要的应用潜力。数字全息法通过对采集到的全息图在不同传播距离进行数字重建,获得粒子的三维位置。然而,当待测粒子位于散射介质中,由于光线在介质中的散射效应,会导致获得的全息图信噪比(signal-to-noise ratio,SNR)严重降低。在此场景下,数字全息反向传播(back propagation,BP)数值重建将遇到困难,给粒子三维信息的获取带来挑战[5]

近年来,压缩感知(compressed sensing,CS)[6]理论的提出为解决数字全息中的低信噪比问题带来了新的机遇。该理论突破了奈奎斯特采样定理的限制,通过将全息技术与压缩感知相结合。利用CS优化算法重构原始信号,能够精确重建三维粒子场信息[7]。基于全变分(total variation,TV)[8]正则化的CS方法为降低全息图中的散射和孪生像噪声提供了有效的解决方案。CS方法已经证明了其在非均匀介质成像中抑制散射噪声的能力,并已成功应用于稀疏性约束下二维全息图重建三维分层物体[9]。2012年,美国麻省理工大学的Liu等[10]将压缩全息引入边缘稀疏约束,以亚像素精度对物体进行定量定位测量,实现了1/45像素的定位精度。2017年,美国西北大学的Wang等[11]将压缩全息术和编码曝光技术结合起来,通过数字微镜实现了像素级的时间调制,根据单幅振动头发全息图来重建其四维运动场景。2020年,上海大学的伍小燕等[12]将变密度减采样的方法与压缩感知重建相结合,实现了较低采样率条件下高质量层析重建。压缩全息术的出现为散射介质中粒子信息的恢复提供了一种可行的方法,提高了粒子检测和分析的准确性。

本研究利用压缩全息和自动聚焦的方法,恢复了清晰的散射介质中粒子全息图,并定位了粒子的三维位置。该方法的轴向精度达到3 μm,有效地解决了数字全息图重建中的逆问题,降低了杂散光噪声,减弱了孪生像干扰,并抑制了散射介质中物体信息的散射。

1 原 理

同轴数字全息是一种常用的三维粒子场成像方法,具有结构简单,抗干扰能力强等优点[13]图1为同轴全息成像原理图,其中相干光束穿过粒子样本,与未穿过样本的参考光束发生干涉,形成全息图,并在成像面被电荷耦合器件(charge coupled device,CCD)所捕捉[14]

图 1 同轴数字全息成像原理 Figure 1 Schematic of in-line holographic imaging.

参考光和物光形成干涉,在CCD平面的干涉条纹光强I可表示为

$\begin{split} I\left(x,y\right)=&{\left|O\left(x,y\right)+R\left(x,y\right)\right|}^{2}\\ =&{\left|O\left(x,y\right)\right|}^{2}+{\left|R\left(x,y\right)\right|}^{2}+\\ & {R}^{*}\left(x,y\right)O\left(x,y\right)+R\left(x,y\right){O}^{*}\left(x,y\right) \end{split}$ (1)

式中:Ox, y)表示物光波;$ R\left(x,y\right) $表示参考光;R*x, y)表示参考光波的共轭;O*x, y)表示物光波的共轭。激光穿过粒子场后,经过粒子的调制,其强度信息包含在Ox, y)中,通过数值方法求解强度信息,得到粒子的信息。

采用角谱数值重建方法,在重建距离z处,物光波复振幅分布为

$ \begin{array}{c}{u}_{ {\textit{z}}}\left(x,y\right)={F}^{-1}\left\{F\left[{u}_{0}\left(x,y\right)\right]H\left(\xi ,\gamma \right)\right\} \end{array} $ (2)

式中:F表示傅里叶变换;$ {F}^{-1} $表示傅里叶逆变换;$ {u}_{0}\left(x,y\right) $代表z = 0处的物光波复振幅;$ H\left(\xi ,\gamma \right) $为传递函数,其表达式为

$ \begin{array}{c}H\left(\xi ,\gamma \right)=\mathrm{exp}\left[\mathrm{j}\dfrac{2{\text{π}}{\textit{z}}}{\lambda }\sqrt{1-{\left(\lambda \xi \right)}^{2}-{\left(\lambda \gamma \right)}^{2}}\right] \end{array} $ (3)

式中:$ \lambda $为光波波长;频域$ \xi $与空域$ \gamma $的坐标对应为

$ \begin{array}{c}\xi =\dfrac{x}{\lambda {\textit{z}}}\text{,}\gamma =\dfrac{y}{\lambda {\textit{z}}} \end{array} $ (4)

其中,式(1)归一化后仍然具有适用性,可得

$ \begin{array}{c}H\left(x,y\right)=2{\mathrm{Re}}\left\{O\left(x,y\right)\right\}+e\left(x,y\right) \end{array} $ (5)

式中,ex, y)表示系统引入的误差。图像大部分区域内的梯度分布通常趋向于零,这表明在梯度域内物体可以被认为是稀疏的,而孪生像产生的扩散模式在梯度域非稀疏。压缩全息通过稀疏性约束集成了数字全息和压缩传感,主要求解方法有两步:迭代收缩阈值算法(two-step iterative shrinkage/thresholding algorithm, TwIST)和阈值迭代算法(iterative shrinkage/thresholding algorithms,IST)。TwIST算法相对于IST算法具有更快的收敛速度[15],因此本研究利用TwIST算法来重建图像抑制噪声。重建平面中物体的估计复场为

$ \begin{array}{c}\widehat{f}={\mathrm{argmin}}\dfrac{1}{\gamma }\parallel g-2{\mathrm{Re}}\left\{Hf\right\}{\parallel }_{2}+k{{\varGamma} }_{\mathrm{T}\mathrm{V}}\left(f\right) \end{array} $ (6)

式中:g表示测量图像之间的误差;k>0为常数;ΓTVf)为全变分(total variation,TV)正则化算子[16],其计算公式为

$ \begin{array}{c}\varGamma_{T V}(f)=\iint|\nabla f| \mathrm{d} x \mathrm{~d} y=\iint (f_x+f_y) {\mathrm{d}} x {\mathrm{d}} y\end{array} $ (7)

式中:fxfy分别表示图像在xy方向上的复振幅值差的绝对值。TV值的含义为图像梯度,该值越小则图像越平滑,噪声越低。因此,通过限制图像的全变分可以达到降低噪声的效果。

为了从不同深度的重建中自动检测粒子的三维位置,使用了Intensity(I),Laplace(L),Brenner(B),Roberts(R[17]等自动对焦评价函数来确定粒子的深度。它们各自的方程为

$ \begin{array}{c}I={\displaystyle\sum }_{x}{\displaystyle\sum} _{y} \left\{\left[f\right(x,y)-\mu {]}^{2}\right\} \end{array} $ (8)
$ \begin{array}{c}L={\displaystyle\sum }_{x}{\displaystyle\sum} _{y}{\left[ \begin{array}{c}q\left(x + 1,y\right) + q\left(x - 1,y\right) + \\q\left(x,y + 1\right) + q(x,y - 1) - 4q(x,y{)}^{2}\end{array} \right]}^{2} \end{array} $ (9)
$ \begin{array}{c}B={\displaystyle\sum} _{x}{\displaystyle\sum} _{y}\left\{{\left[q\left(x+2,y\right)-q\left(x,y\right)\right]}^{2}\right\} \end{array} $ (10)
$ \begin{array}{c}R={\displaystyle\sum} _{x}{\displaystyle\sum} _{y} \left\{\begin{array}{c}{\left[q\left(x+1,y+1\right)-q\left(x,y\right)\right]}^{2}+\\ {\left[q\left(x+1,y\right)-q\left(x,y+1\right)\right]}^{2}\end{array}\right\} \end{array} $ (11)

式中:$ \mu $表示图片的平均强度;qx, y)表示图像中坐标(x, y)处的像素强度值。

2 模拟结果和分析

当粒子处于散射环境时,使用同轴全息采集的粒子衍射图像信噪比很低,这给传统的数值重建带来了挑战。通过模拟生成一幅包含5个不同深度粒子的数字全息图,并加入阈值为0.4的高斯噪声。噪声将模拟粒子全息图的衍射环淹没,这模拟了捕捉散射介质中的粒子的成像结果。图2(a)和图2(b)显示了模拟粒子在空间上的分布。颗粒深度分别为462 μm,526 μm,582 μm(2个),614 μm和734 μm。

图 2 模拟粒子的二维和三维分布 Figure 2 Simulation results of particles in 2D and 3D space

图3展示了模拟粒子在不同深度中的重建结果,选取其中3个聚焦平面,分别采用角谱法反向传播(BP法)和CS法对模拟粒子进行重构。在模拟粒子深度前后5 μm处对粒子进行重建,间隔为1 μm。图3(a)~(c)为用CS法重建的模拟粒子全息图。CS中总变分正则化条件的约束有效地减弱了模拟粒子重构中固有的零阶项和孪生图像噪声。当一个平面上的粒子聚焦时,其他平面上的粒子就会散焦。压缩全息法还可以有效地抑制不同层间粒子的干涉。使用MATLAB中的imfindcircle函数,识别出边缘锐利的粒子,并在图中用红色圆圈表示。应用上文说明的4种自动对焦方法对角谱法重建后的图像中的粒子进行定位,自动对焦结果如图3(d)~(f)所示。对图3(b)中的粒子,4种方法并不能找到极小值点,其自动聚焦曲线单调递增,说明在背景噪声较强的情况下,角谱法的重构不能有效地恢复粒子信息。图3(g)~(i)为CS重建全息图的自动对焦曲线。可以看出,4种方法能够有效地识别出共同聚焦平面。红色虚线表示设置的粒子深度位置。4种自动聚焦方法的极值点与设定的粒子深度位置误差均小于3 μm,5种粒子的平均深度误差为2.2 μm,证明了CS方法在噪声环境下处理粒子全息图能够获得较高的轴向精度。

图 3 通过Hough变换识别CS重建后的粒子全息图以及自动聚焦评价结果 Figure 3 The particle hologram after CS reconstruction identified by Hough transform and the auto-focusing evaluation results
3 实验结果和分析

为进一步验证本研究方法的有效性,进行了水和明胶介质中的粒子识别实验,采用如图4(a)所示的同轴数字全息系统进行数据采集。实验系统如图4(b)所示,使用的激光器为富和科技的632 nm红色光源,型号为FU650ADX-PXG1670,输出功率为5 mW,相干长度为20 cm。全息图使用奥林巴斯倒置显微镜,用10×物镜放大,用分辨率为1280×1024,像元尺寸为4.8 μm的Wattentech HTSUA34GC相机记录。样品为聚苯乙烯微粒,直径为30 μm,分别分散于清水和明胶当中,并放置于载玻片上方便观察。含有聚苯乙烯微粒的明胶实验样本如图4(c)所示。

图 4 数据收集实验系统 Figure 4 Experimental system for data collection

相机记录的粒子全息图如图5所示。图5(a)为水中粒子全息图;图5(b)为明胶中的粒子全息图。水中的颗粒表现出清晰的衍射环,而明胶中的颗粒由于介质的散射而在衍射环内表现出散射效应,这种散射效应会给后续的重建带来严重挑战。

图 5 实验采集的样本全息图 Figure 5 Holograms of the sample collected in the experiment

图6(a)为角谱法重建的水中粒子,图6(b)为CS法重构的水中粒子。水中粒子的实验数据与模拟结果接近,重建质量高,有效地减弱了背景噪声和孪生像。图6(c)描绘了用角谱法重建的明胶中的颗粒。很明显,使用角谱法从明胶中恢复粒子是具有挑战性的。图6(d)为CS重建的明胶中的颗粒,可以看出明胶中的颗粒结构清晰可见,明显减少了明胶介质造成的散射。红色圆圈表示通过MATLAB中的imfindcircle函数识别的该平面内的聚焦粒子。

图 6 使用CS和BP算法重建后的全息图 Figure 6 The reconstructed holograms using CS and BP algorithms

表1给出了CS和BP 重构的水及明胶中颗粒的峰值信噪比(PSNR)、结构相似指数(SSIM) 、均方误差(MSE) 以及信噪比(SNR)。信噪比的值VSNR =(Iavg/Io),其中Iavg 为粒子图像的平均强度,Io 为粒子图像的背景强度。MSE 是用于测量两幅图像的像素值之间差异的平均平方误差。MSE的值越小,两幅图像之间的差异就越小,图像质量就越好。PSNR 用来衡量两幅图像之间的信号强度与噪声强度之比,该值越高,图像质量越好。SSIM 用于评估两幅图像之间的结构相似性,主要考虑3个因素:亮度、对比度和结构。与PSNR 相比,SSIM 能更好地反映人眼对图像质量的感知,该值越大,两幅图像之间的相似性越好。4种评价指标都通过将背景图像作为参考来计算。表1中4种评价指标比较的结果显示,CS 算法处理的颗粒,无论是在水中还是在明胶中,都得到显著改善。这表明CS 与TV 正则化相结合可显著提高重建图像的质量。

表 1 不同重建方法的评价 Table 1 Evaluation of different reconstruction methods

为了验证对散射介质中粒子大小的测量结果,使用Hough变换识别明胶中不同直径的颗粒数量,通过设置Hough变换的直径,统计出不同直径粒子的分布,结果如图7所示。实验中添加了20个直径为30 μm的粒子,CS法识别的直径为30 μm的粒子占全部粒子数的75%,而角谱法识别的30 μm直径的粒子只占30%。说明光线在介质中散射以及背景噪声会导致角谱法难以准确识别明胶散射介质中的粒子大小,而通过CS方法可以很好地解决这个问题,从而验证了所提出的方法的有效性。

图 7 不同方法对明胶中粒子的识别结果 Figure 7 Identification results of particles in gelatin by different methods
4 结 论

本文介绍了一种基于压缩全息的检测方法,它能够用于观察和分析散射介质中微粒的三维分布,判断粒子直径。将CS与TV正则化相结合,能够有效抑制杂散光噪声,消除孪生图像干扰,使重建图像具有较高的轴向精度。实验结果表明,本文提出的方法在处理明胶中粒子全息图时,显著提高了图像质量,在PSNR,SSIM,MSE和SNR等评价指标上均有提升。与传统的角谱重建方法相比,CS处理后的粒子图像质量明显得到提高。然而,由于明胶介质的独特性质,在某些深度位置的粒子识别仍然存在挑战,表明该方法需要进一步改进。未来的工作将集中在优化算法以提高散射介质中粒子识别的准确性,并探索该技术在检测其他生物材料方面的潜在应用。

参考文献
[1] YI F L, MOON I, JAVIDI B. Automated red blood cells extraction from holographic images using fully convolutional neural networks[J]. Biomedical Optics Express, 2017, 8(10): 4466–4479. DOI:10.1364/BOE.8.004466
[2] WU X C, LI X W, YAO L C, et al. Accurate detection of small particles in digital holography using fully convolutional networks[J]. Applied Optics, 2019, 58(34): G332–G344. DOI:10.1364/AO.58.00G332
[3] HUSSAIN R, NOYAN M A, WOYESSA G, et al. An ultra-compact particle size analyser using a CMOS image sensor and machine learning[J]. Light: Science & Applications, 2020, 9: 21.
[4] CHOI Y S, LEE S J. Three-dimensional volumetric measurement of red blood cell motion using digital holographic microscopy[J]. Applied Optics, 2009, 48(16): 2983–2990. DOI:10.1364/AO.48.002983
[5] BRADY D J, CHOI K, MARKS D L, et al. Compressive holography[J]. Optics Express, 2009, 17(15): 13040–13049. DOI:10.1364/OE.17.013040
[6] WU D X, LUO J W, HUANG G Q, et al. Imaging biological tissue with high-throughput single-pixel compressive holography[J]. Nature Communications, 2021, 12(1): 4712. DOI:10.1038/s41467-021-24990-0
[7] ZHANG H, LIU S W, CAO L C, et al. Noise suppression for ballistic-photons based on compressive in-line holographic imaging through an inhomogeneous medium[J]. Optics Express, 2020, 28(7): 10337–10349. DOI:10.1364/OE.385992
[8] ZHANG Y Y, HUANG Z Z, JIN S Z, et al. Autofocusing of in-line holography based on compressive sensing[J]. Optics and Lasers in Engineering, 2021, 146: 10667.
[9] ZHANG Y Y, HUANG Z Z, JIN S Z, et al. Hough transform-based multi-object autofocusing compressive holography[J]. Applied Optics, 2023, 62(10): D23–D30. DOI:10.1364/AO.478473
[10] LIU Y, TIAN L, LEE J W, et al. Scanning-free compressive holography for object localization with subpixel accuracy[J]. Optics Letters, 2012, 37(16): 3357–3359. DOI:10.1364/OL.37.003357
[11] WANG Z H, SPINOULAS L, HE K, et al. Compressive holographic video[J]. Optics Express, 2017, 25(1): 250–262. DOI:10.1364/OE.25.000250
[12] 伍小燕, 于瀛洁, 白跃伟, 等. 基于频域变密度减采样的无放大同轴全息图的压缩传感层析重建[J]. 红外与激光工程, 2020, 49(S1): 20190500.
[13] YOSHIDA S, ITAKURA K. Compressed holographic particle tracking velocimetry for microflow measurements[J]. Optical Review, 2020, 27(5): 441–446. DOI:10.1007/s10043-020-00616-6
[14] LIM S, MARKS D L, BRADY D J. Sampling and processing for compressive holography [Invited][J]. Applied Optics, 2011, 50(34): H75–H86. DOI:10.1364/AO.50.000H75
[15] BIOUCAS-DIAS J M, FIGUEIREDO M A T. A new TwIST: two-step iterative shrinkage/thresholding algorithms for image restoration[J]. IEEE Transactions on Image Processing, 2007, 16(12): 2992–3004. DOI:10.1109/TIP.2007.909319
[16] CHAMBOLLE A, LIONS P L. Image recovery via total variation minimization and related problems[J]. Numerische Mathematik, 1997, 76(2): 167–188. DOI:10.1007/s002110050258
[17] MEMMOLO P, DISTANTE C, PATURZO M, et al. Automatic focusing in digital holography and its application to stretched holograms[J]. Optics Letters, 2011, 36(10): 1945–1947. DOI:10.1364/OL.36.001945