High precision azimuth extraction of target in large field of view infrared warning system
-
摘要: 为了解决大视场红外告警系统中目标定位精度较差的问题，采用一种基于主动标志物的多项式拟合法，对大视场红外告警系统中目标方位提取进行了理论研究和实验验证。利用高温陶瓷加热片模拟红外目标，通过高精度2维转台获得相机姿态角与目标中心坐标的对应数据点集，采用二元高阶多项式对目标方位信息进行拟合，实现了大视场红外告警系统中目标高精度方位提取。结果表明，该拟合方法的角度误差在±0.1°以内，目标定位精度较高。这一结果有助于大视场红外成像中目标方位的提取。Abstract: In order to solve the problem of poor target location accuracy in wide-field infrared alarm system, a polynomial fitting method based on active markers was used to extract target location in wide-field infrared alarm system. A high-temperature ceramic heating plate was used to simulate an infrared target, and a high-precision 2-D turntable was used to obtain the corresponding data point set of the camera's attitude angle and the target center coordinates, and a binary high-order polynomial was used to fit the target orientation information. The high-precision azimuth extraction of the target in the large-field infrared warning system was realized. The experimental results show that the angle error of the fitting method is within ±0.1°, and the target positioning accuracy is high. This result is helpful for target azimuth extraction in large-field infrared imaging.
-
引言
大视场红外成像技术具有成像范围广、成本低、可大规模部署的优势，成为军事侦察领域的研究热点之一[1]。大视场红外告警系统是探测空中来袭目标、获取目标方位信息并能及时发出告警信号的光电探测设备[2-3]。但大视场红外成像中存在图像畸变问题，且视场范围越大，图像畸变越严重，导致系统在目标方位提取时出现偏差，造成目标定位精度下降。
传统的大视场红外成像中目标方位识别主要利用相机内外参数进行图像畸变校正[4-6]，再利用校正后的图像进行红外目标检测[7-8]与目标方位计算[9-10]。红外相机是依靠目标红外辐射成像，棋盘格图案无明显的温度界线，相机在标定过程中很容易引入误差，造成图像校正精度下降，最终影响系统的目标方位计算[11]。SHANG等人提出一种分区域标定模型对大视场激光告警系统中来袭激光方位信息进行拟合，实验结果显示，该模型角度误差在0.67°以内，拟合效果较差[12]。GUAN等人提出一种内外参一体化标定的稠密时角法，利用无人机模拟恒星星体，在相机视场内均匀布设控制点并解算标定参数，实验结果显示，该方法计算的角度误差在0.3°以内，系统定位精度较差[13]。
针对大视场红外告警系统中目标定位精度较差的问题，本文作者对大视场红外告警系统的工作原理及成像特点进行分析，设计并验证了一种基于主动标志物的多项式拟合模型，最终给出了一种目标高精度方位提取模型。系统采用1280×1024(焦平面阵列的规格大小)@12 μm(像元间距)非制冷型长波红外探测器，工作波段为8 μm~14 μm，相机焦距为16 mm，视场范围为45°×37°。
1. 大视场红外告警系统
大视场红外告警系统主要由光学模块、图像采集、图像处理及人机界面四部分组成。系统结构如图 1所示，红外目标产生热辐射，热辐射经由光学镜头进行光路折射，最终入射到探测器表面。图像采集模块中可编程门阵列(field-programmable gate array，FPGA)负责驱动探测器并采集探测器输出图像，图像经高速串行输入输出口(serial rapid input output，SRIO)传入到数字信号处理器(digital signal processor，DSP)。DSP负责红外图像中弱小目标检测及目标方位计算[14-15]，最终将来袭目标的方位信息通过异步通信接口(universal asynchronous receiver/transmitter，UART)传递至上位机，上位机接收到目标信息并及时发出告警信号。
![图 1 大视场红外告警系统结构图]()
图 1 大视场红外告警系统结构图Figure 1. Structure diagram of large field of view infrared warning system大视场红外告警系统在光学镜头上引入负畸变效果，用来实现较大的成像视场 。实际应用中，目标理想成像点与实际成像点的对应关系可表示为:
{xc=x(1+k1r2+k2r4)+2l2xy+l1(r2+2x2)yc=y(1+k1r2+k2r4)+2l1xy+l2(r2+2y2)r2=x2+y2 (1) 式中，(x，y)为目标校正前的坐标，(xc，yc)为校正后的坐标，k1和k2为径向畸变系数，l1和l2为切向畸变系数，r为目标到光学中心的距离。
将校正后的坐标代入角度计算公式，其结果如下式所示：
{α=arctan(xc/f)β=arctan(yc/f) (2) 式中，f为相机焦距，(α，β)为目标方位信息。
利用泰勒公式对(2)式进行展开，得到结果如下式所示：
{α=xcf−13(xcf)3+15(xcf)5−⋯+ 12n+1(xcf)2n+1+o(xcf)2n+3β=ycf−13(ycf)3+15(ycf)5−⋯+ 12n+1(ycf)2n+1+o(ycf)2n+3 (3) 式中，n为泰勒多项式的阶数，o为泰勒多项式的无穷小量。
由上述展开式可知，目标方位计算可转化为高阶多项式计算，且多项式的计算结果与目标的2维坐标都有密切联系。本文中利用二元高阶多项式对大视场红外成像中目标方位信息进行拟合，其拟合多项式如下式所示：
{α′=m∑i=0i∑j=0pij(x+y)mβ′=m∑i=0i∑j=0qij(x+y)m (4) 式中，(α′，β′)为拟合后的目标方位信息，m为多项式拟合的阶数，i和j为多项式中x和y的幂数，(pij，qij)为多项式的拟合系数。
2. 实验及结果分析
目标在距离相机较远位置成像时缺乏固定的形状和纹理特征，且所占像素较少，表现为点目标[18]。大视场红外告警系统在实际应用中，目标所占像素通常在几个到几十个之间。本文中选用高温陶瓷加热片模拟红外目标，并控制其成像大小约为30个像素。如图 2所示，将圆形陶瓷加热片固定在背景板上，采用高灵敏度的温度传感器采集加热片温度，并通过微型控制器(micro controllor unint，MCU)控制其温度稳定在60 ℃附近。将红外相机水平放置在2维转台上，调整加热片位置，使其成像在相机的光学中心上。利用上位机控制2维转台以4°为步进长度在水平和俯仰方向移动，记录相机在不同姿态角时对应的红外图像。红外相机与2维转台的实物图如图 3所示。
采用阈值分割法[19]对上述实验中获取的图像进行二值化处理。如图 4所示，本文中列出了目标在部分方位角时对应的二值化图像，图中黑色区域为背景图像，白色区域为红外目标。采用质心法[20]计算二值化图像中目标在图像坐标系下的中心坐标，最终获得大视场红外成像中目标方位信息与目标中心坐标的对应数据点集。
将实验中获取的数据点集导入到平面坐标系中。如图 5所示，大视场红外成像中目标采样点集呈桶状分布，且越靠近视场边缘部分，目标分布越密集；在水平方向上，随着目标偏转角逐渐增大，目标在同一偏转角的成像轨迹逐渐由直线变为弧线，且该弧线关于轴对称；在竖直方向上，随着目标俯仰角逐渐增大，目标在同一俯仰角的成像轨迹逐渐由直线变为弧线，且该弧线关于轴对称。
由上述实验现象可知，大视场红外成像中，目标偏转角不仅与水平方向坐标有关，还与竖直方向坐标有关；目标俯仰角不仅与竖直方向坐标有关，也与水平方向坐标有关。本文中采用二元高阶多项式对大视场红外成像中目标方位信息进行拟合，拟合结果显示，当多项式次幂为奇数时，随着多项式次幂的逐渐提升，多项式拟合的角度误差也在逐渐减小。当多项式次幂等于5时，系统偏转角的均方根误差为0.045°，俯仰角的均方根误差为0.056°，此时，多项式拟合结果如下所示：
α′=−0.024+0.031x+9.614×10−18y+1.094×10−6x2−4.361×10−21xy+6.146×10−7y2+7.486×10−9x3−5.835×10−23x2y+6.521×10−9xy2−9.217×10−23y3−2.507×10−12x4−8.821×10−28x3y+5.001×10−14x2y2+1.645×10−26xy3−9.989×10−13y4+1.398×10−14x5+4.486×10−29x4y+2.86×10−14x3y2+2.824×10−28x2y3+7.133×10−15xy4+2.101×10−28y5 (5) β′=−9.692×10−16+3.182×10−19x+0.031y+1.243×10−20x2−3.49×10−9xy−6.655×10−21y2+2.123×10−24x3+5.56×10−9x2y−1.158×10−23xy2+8.665×10−9y3−2.579×10−26x4+2.991×10−13x3y+7.501×10−27x2y2+7.293×10−13xy3+4.003×10−26y4−1.008×10−29x5+2.795×10−14x4y+2.322×10−29x3y2+4.962×10−14x2y3+2.506×10−29xy4+8.899×10−15y5 (6) 为了观察多项式拟合的效果，将通过(5)式、(6)式拟合后的目标方位信息导入到平面坐标系中。如图 6所示，拟合后的数据点集在平面坐标系中均匀分布，且目标在同一偏转角或同一俯仰角的成像轨迹为均匀的直线。通过对比数据拟合前和拟合后的分布情况，可知该模型方位拟合效果较好。
为了进一步验证多项式拟合法的目标定位精度，将目标实际方位与多项式拟合结果进行对比，得到该方法的拟合误差，如图 7、图 8所示。从图中可以看出，该方法拟合误差优于0.1°，可以在很大程度上提升系统的目标定位精度。
随机采样6组数据，得到目标实际方位与多项式拟合结果，如表 1所示。
表 1 数据计算结果Table 1. Data calculation resultsorientation information/(°) center coordinates calculation results/(°) angle error/(°) α β x y α′ β′ Δα Δβ 2.00 8.00 66.3 254.2 2.07 7.95 -0.07 0.05 8.00 2.00 254.4 62.5 7.96 1.93 0.04 0.07 20.00 0.00 576.2 -1.1 20.02 -0.04 -0.02 0.04 -18.00 -10.00 -520.3 -279.6 -17.97 -10.05 -0.03 0.05 -22.00 -8.00 -611.7 -211.3 -22.06 -7.93 0.06 -0.07 -22.00 -16.00 -588.4 -398.2 -22.01 -15.95 0.01 -0.05 3. 结论
本文中介绍了大视场红外告警系统的工作原理及成像特点，通过理论推导及实验现象得出大视场红外成像中目标偏转角、俯仰角与目标在图像坐标系中2维坐标都具有紧密的联系。提出并验证了一种基于二元高阶多项式的目标方位拟合模型，实验结果表明，该模型的拟合角度误差在±0.1°以内，在很大程度上提高了大视场红外告警系统中目标定位精度。该结果为大视场或鱼眼成像中目标方位识别提供了一种新的方法，适用于光电对抗、航空航天等军事侦察领域。
-
![]()
图 1 大视场红外告警系统结构图
Figure 1. Structure diagram of large field of view infrared warning system
表 1 数据计算结果
Table 1 Data calculation results
orientation information/(°) center coordinates calculation results/(°) angle error/(°) α β x y α′ β′ Δα Δβ 2.00 8.00 66.3 254.2 2.07 7.95 -0.07 0.05 8.00 2.00 254.4 62.5 7.96 1.93 0.04 0.07 20.00 0.00 576.2 -1.1 20.02 -0.04 -0.02 0.04 -18.00 -10.00 -520.3 -279.6 -17.97 -10.05 -0.03 0.05 -22.00 -8.00 -611.7 -211.3 -22.06 -7.93 0.06 -0.07 -22.00 -16.00 -588.4 -398.2 -22.01 -15.95 0.01 -0.05 
下载: 导出CSV
-
[1] 张帅, 刘秉琦, 黄富瑜, 等. 超大视场红外凝视成像技术及其应用浅析[J]. 激光与红外, 2016, 46(10): 1176-1182. DOI: 10.3969/j.issn.1001-5078.2016.10.002 ZHANG Sh, LIU B Q, HANG F Y, et al. Super wide field of view staring infrared imaging technology and its application[J]. Laser & Infrared, 2016, 46(10): 1176-1182(in Chinese). DOI: 10.3969/j.issn.1001-5078.2016.10.002
[2] 任宁, 姜丽新. 光电告警技术与国外典型装备发展分析[J]. 光电技术应用, 2020, 35(3): 12-16. DOI: 10.3969/j.issn.1673-1255.2020.03.003 REN N, JIANG L X. Development analysis of electro-optical warning technology and foreign typical equipments[J]. Electro-Optic Techno-logy Application, 2020, 35(3): 12-16(in Chinese). DOI: 10.3969/j.issn.1673-1255.2020.03.003
[3] 朱怀毅. 基于红外的空中目标告警跟踪系统研究[D]. 长沙: 长沙理工大学, 2017: 14-65. ZHU H Y. Research on airborne target warning tracking system based on infrared[D]. Changsha: Changsha University of Science & Technology, 2017: 14-65(in Chinese).
[4] 石岩青, 常彩霞, 刘小红, 等. 面阵相机内外参数标定方法及进展[J]. 激光与光电子学进展, 2021, 58(24): 2400001. https://www.cnki.com.cn/Article/CJFDTOTAL-JGDJ202124001.htm SHI Y Q, CHANG C X, LIU X H, et al. Calibration methods and progress for internal and external parameters of area-array camera[J]. Laser and Optoelectronics Progress, 2021, 58(24): 2400001(in Chinese). https://www.cnki.com.cn/Article/CJFDTOTAL-JGDJ202124001.htm
[5] LIU Zh, LI F J, LI X J, et al. A novel and accurate calibration method for cameras with large field of view using combined small targets[J]. Measurement, 2015, 64: 1-16. DOI: 10.1016/j.measurement.2014.11.027
[6] 王子昂, 刘秉琦, 黄富瑜. 基于主动红外辐射标定板的超广角红外相机标定[J]. 半导体光电, 2019, 40(5): 700-703. https://www.cnki.com.cn/Article/CJFDTOTAL-BDTG201905018.htm WANG Z A, LIU B Q, HUANG F Y. Ultra-wide angle infrared camera calibration based on active infrared radiation calibration checkerboard[J]. Semiconductor Optoelectronics, 2019, 40(5): 700-703(in Chinese). https://www.cnki.com.cn/Article/CJFDTOTAL-BDTG201905018.htm
[7] 陈勤霞, 武文成, 艾斯卡尔·艾木都拉. 一种基于多尺度点状目标建模的检测算法[J]. 激光技术, 2020, 44(4): 520-524. DOI: 10.7510/jgjs.issn.1001-3806.2020.04.021 CHEN Q X, WU W Ch, ASKAR H. Detection algorithm based on multi-scale spotted target modeling[J]. Laser Technology, 2020, 44(4): 520-524(in Chinese). DOI: 10.7510/jgjs.issn.1001-3806.2020.04.021
[8] 朱金辉, 张宝华, 谷宇, 等. 基于双邻域对比度的红外小目标检测算法[J]. 激光技术, 2021, 45(6): 794-798. DOI: 10.7510/jgjs.issn.1001-3806.2021.06.020 ZHU J H, ZHANG B H, GU Y, et al. Infrared small target detection algorithm based on double neighborhood contrast measure[J]. Laser Technology, 2021, 45(6): 794-798(in Chinese). DOI: 10.7510/jgjs.issn.1001-3806.2021.06.020
[9] 吴琼, 张瑞, 石金, 等. 高精度二维宽波段激光告警参数计算算法[J]. 应用光学, 2022, 43(1): 111-118. https://www.cnki.com.cn/Article/CJFDTOTAL-YYGX202201018.htm WU Q, ZHANG R, SHI J, et al. Calculation algorithm of high-precision two-dimensional broadband laser warning parameters[J]. Journal of Applied Optics, 2022, 43(1): 111-118(in Chinese). https://www.cnki.com.cn/Article/CJFDTOTAL-YYGX202201018.htm
[10] 杨承, 曾钦勇, 朱大勇, 等. 日盲型紫外探测系统中目标定位的研究[J]. 激光技术, 2008, 32(2): 140-142. http://www.jgjs.net.cn/article/id/8855 YANG Ch, ZENG Q Y, ZHU D Y, et al. Study on the target location in solar blind ultraviolet detecting system[J]. Laser Technology, 2008, 32(2): 140-142(in Chinese). http://www.jgjs.net.cn/article/id/8855
[11] 王谭, 王磊磊, 张卫国, 等. 基于张正友标定法的红外靶标系统[J]. 光学精密工程, 2019, 27(8): 1828-1835. https://www.cnki.com.cn/Article/CJFDTOTAL-GXJM201908018.htm WANG T, WANG L L, ZHANG W G, et al. Design of infrared target system with Zhang Zhengyou calibration method[J]. Optics and Precision Engineering, 2019, 27(8): 1828-1835(in Chinese). https://www.cnki.com.cn/Article/CJFDTOTAL-GXJM201908018.htm
[12] 尚琰, 张瑞, 林聪, 等. 光栅衍射型宽波段大视场激光告警图像处理[J]. 激光杂志, 2021, 42(11): 92-96. https://www.cnki.com.cn/Article/CJFDTOTAL-JGZZ202111016.htm SHANG Y, ZHANG R, LIN C, et al. Image processing of grating diffraction wide-band and large-field lase warning[J]. Laser Journal, 2021, 42(11): 92-96(in Chinese). https://www.cnki.com.cn/Article/CJFDTOTAL-JGZZ202111016.htm
[13] 官斌, 蔡龙飞. 基于稠密时角法的天空背景相机标定技术研究[J]. 光学与光电技术, 2021, 19(5): 55-60. https://www.cnki.com.cn/Article/CJFDTOTAL-GXGD202105009.htm GUAN B, CAI L F. Denseness star-arc calibration for sky-background survey camera[J]. Optics & Optoelectronic Technology, 2021, 19(5): 55-60(in Chinese). https://www.cnki.com.cn/Article/CJFDTOTAL-GXGD202105009.htm
[14] 孙秀峰. 基于国产多核DSP的红外弱小目标检测算法[J]. 数字技术与应用, 2020, 38(10): 80-82. https://www.cnki.com.cn/Article/CJFDTOTAL-SZJT202010028.htm SUN X F. Infrared dim targets detection basedonthe nationalization of multi-core DSP[J]. Digital Technology and Application, 2020, 38(10): 80-82 (in Chinese). https://www.cnki.com.cn/Article/CJFDTOTAL-SZJT202010028.htm
[15] 朱发强. 基于多核DSP的红外告警信息处理系统设计[D]. 西安: 西安电子科技大学, 2018: 32-93(in Chinese). ZHU F Q. Infrared warning Information processing system design based on multicore DSP[D]. Xi'an: Xidian University, 2018: 32-93(in Chinese).
[16] 陈建发, 潘枝峰, 王合龙. 超大视场红外光学镜头设计[J]. 红外与激光工程, 2020, 49(6): 282-287. https://www.cnki.com.cn/Article/CJFDTOTAL-HWYJ202006035.htm CHEN J F, PAN Zh F, WANG H L. Design of infrared optical lens with large field of view[J]. Infrared and Laser Engineering, 2020, 49(6): 282-287 (in Chinese). https://www.cnki.com.cn/Article/CJFDTOTAL-HWYJ202006035.htm
[17] 刘帅, 牛燕雄, 刘海月. 全向凝视光电成像系统鱼眼透镜的设计[J]. 激光技术, 2017, 41(2): 296-301. DOI: 10.7510/jgjs.issn.1001-3806.2017.02.030 LIU Sh, NIU Y X, LIU H Y. Design of fisheye lens of omnidirectional gaze photoelectric imaging systems[J]. Laser Technology, 2017, 41(2): 296-301(in Chinese). DOI: 10.7510/jgjs.issn.1001-3806.2017.02.030
[18] 周玉龙. 超大视场红外告警系统的成像特点分析[J]. 应用光学, 2010, 31(6): 871-875. https://www.cnki.com.cn/Article/CJFDTOTAL-YYGX201006003.htm ZHOU Y L. Image analysis of ultra-wide field of view infrared warning system[J]. Journal of Applied Optics, 2010, 31(6): 871-875(in Chinese). https://www.cnki.com.cn/Article/CJFDTOTAL-YYGX201006003.htm
[19] 王好贤, 董衡, 周志权. 红外单帧图像弱小目标检测技术综述[J]. 激光与光电子学进展, 2019, 56(8): 080001. https://www.cnki.com.cn/Article/CJFDTOTAL-JGDJ201908001.htm WANG H X, DONG H, ZHOU Zh Q. Review on dim small target detection technologies in infrared single frame images[J]. Laser & Optoelectronics Progress, 2019, 56(8): 080001(in Chinese). https://www.cnki.com.cn/Article/CJFDTOTAL-JGDJ201908001.htm
[20] XU W X, QIAO W D, YANG J F, et al. Study about distortion measurement of NFOV lens based on star point method[J]. Laser Technology, 2011, 35(5): 593-595(in Chinese).
-
期刊类型引用(3)
1. 张明淳，牛春晖，刘力双，刘洋. 用于无人机探测系统的红外小目标检测算法. 激光技术. 2024(01): 114-120 . 
本站查看
2. 徐一翔，吕勇. 基于生成对抗网络的轻量化图像融合算法. 北京信息科技大学学报(自然科学版). 2024(03): 84-90 . 百度学术
3. 刘皓皎，刘力双，张明淳. 基于YOLOv5改进的红外目标检测算法. 激光技术. 2024(04): 534-541 . 本站查看
其他类型引用(0)
计量
- 文章访问数: 7
- HTML全文浏览量: 0
- PDF下载量: 7
- 被引次数: 3