- 单目立体三维重建技术及应用
- 胡立华
- 1994字
- 2021-02-22 16:02:04
3.4 模拟实验
为了验证MECDPSI算法的正确性及鲁棒性,本节对MECDPSI算法给出了模拟实验过程及结果。本节对MECDPSI算法进行了单次模拟及多次模拟。模拟实验主要设计了3组情况:第一组为图像无噪声时的实验;第二组、第三组分别为不同噪声水平下的实验。模拟实验分为3个步骤:①模拟数据生成;②估计单应矩阵和畸变参数;③单应矩阵和畸变参数整体优化。
3.4.1 单次实验模拟步骤及结果
1. 单次模拟实验
本节主要对MECDPSI算法进行单次模拟实验,模拟实验采用的数据如下。
(1)随机生成1000个空间平面点,i=1,2,3…,1000。其中,xi∈[−200,200],yi∈[−200,200]。
(2)摄像机内参数矩阵为
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-56-2.jpg?sign=1739483513-r4Cr87J2fodyC0hnM54K6b8JsKtK7oco-0-86c82e842e414a61a628744684de3730)
(3)摄像机二阶径向畸变参数为
[k1 k2]=[1.6×10−8 2.56×10−13]
(4)生成的模拟图像大小为800像素×600像素。
(5)主点为图像中心点:(400,300)。
(6)随机生成世界坐标系与摄像机坐标系之间的旋转矩阵R和平移向量T,并生成单应矩阵HM=K[r1 r2 T]。
(7)根据下列公式生成1000个图像平面点,i=1,2,3,…,1000。
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-57-1.jpg?sign=1739483513-IJCbCIfDfvnyqZLadeP7JBIl5eM3h8Al-0-c837e9ef07fcad927a1d55558cb50c07)
(8)已知畸变参数[k1 k2]=[1.6×10−8 2.56×10−13],由以下畸变公式生成含二阶径向畸变的1000个畸变图像点,i=1,2,3,…,1000。
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-57-3.jpg?sign=1739483513-SiYTNVVB1LD9ss16pUZW1fvq3h6N8sRi-0-59888d02358bbda1bfbd87d2d2c0634e)
单次模拟实验的模拟数据分别在无噪声、加入噪声水平为[-1,1]和[-2,2]的均匀随机噪声下生成。为了直观地表示,图中均随机选择模拟生成的100个空间平面点。图3.1所示为无噪声条件下模拟生成的100个随机空间平面点与摄像机的位置。
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-57-4.jpg?sign=1739483513-OwqqNnxslkB6I0fkKmmJ6w620EL3NTMz-0-50aab6ca3025fa585b23f5cc544a84fd)
图3.1 仿真空间点与摄像机的位置
由随机生成的HM和模拟生成的1000个空间点数据可以得到模拟图像点数据Up,表3.1所示为无噪声与加入不同的噪声值的情况下获得的单应矩阵HM。
表3.1 模拟实验的单应矩阵HM
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-58-1.jpg?sign=1739483513-blKaaa5qv0vQIfWbnQ0EiGy8K8NHLm9G-0-c358ac1163ad4f15553a8bcb14fdd695)
2. 生成畸变数据
输入模拟图像点Up,依据3.2.2节中的摄像机畸变模型可以计算无噪声、加入噪声水平为[-1,1]、[-2,2]的随机噪声后的图像畸变点Ud,如图3.2所示。
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-58-2.jpg?sign=1739483513-t1N3JyPtwVJhkd1g63KTwYChu9ZCYISN-0-62d487a2a7029d18749825f36a0fb698)
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-59-1.jpg?sign=1739483513-ms23tKiOPQppTRNwtXQ71h5NpKTGSZqC-0-d4b7fd9ea62f3b5170bfeaa9aab0e9bb)
图3.2 畸变图像
3. 计算初始单应矩阵H0
计算畸变图像点Ud与主点(400,300)之间的距离,依据主点附近10个点估计初始单应矩阵H0,采样图如图3.3所示。
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-60-1.jpg?sign=1739483513-ZdvFuZeDcBonPxom9YPCOLHK2XoHp2EE-0-3d5b602ea547e51ecb2f72a6d92ebfff)
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-61-1.jpg?sign=1739483513-C59vCdpjYPpLJHI66S4BQC7imbqcYLOt-0-f9f057e197fbaa3a53c47d8b6a0d4b53)
图3.3 主点附近样点采集图
依据主点附近的10个点,估计出的单应矩阵与初始摄像机畸变参数如表3.2所示。
表3.2 单应矩阵与初始摄像机畸变参数
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-61-2.jpg?sign=1739483513-3cB00SXHzaKE88GRepVFk34WujfsV55c-0-3ac176ad0b8976c966701ae373564134)
图3.4所示为利用在无噪声水平下估计的单应矩阵及畸变参数计算空间点的投影。
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-62-1.jpg?sign=1739483513-RWfC1BaDu2RoSMJm0I8ifiGUDsANcelR-0-35d2a0666b315b62673e887b8fe4a148)
图3.4 利用在无噪声水平下估计的单应矩阵及畸变参数计算空间点的投影
图3.5所示为利用在噪声水平为[-1,1]下估计的单应矩阵及畸变参数计算空间点的投影。
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-62-2.jpg?sign=1739483513-rYiG7gR73mzzPEKiatKMIURR8LbpSujF-0-2f51b6903a3392bd332bd4fd3234f6b0)
图3.5 利用在噪声水平为[-1,1]下估计的单应矩阵及畸变参数计算空间点的投影
图3.6所示为利用在噪声水平为[-2,2]下估计的单应矩阵及畸变参数计算空间点的投影。
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-63-1.jpg?sign=1739483513-x8uAb8PRNkdx7u89TVB6cuXoa4z1vQzU-0-d8021f6e93fbb05228233683958b6e75)
图3.6 利用在噪声水平为[-2,2]下估计的单应矩阵及畸变参数计算空间点的投影
图3.4 ~ 图3.6中的“*”号标记的点表示原始无畸变图像点,“°”号标记的点表示利用估计的单应矩阵H0计算的虚拟图像点,“+”号标记的点表示采用初始摄像机畸变参数P校正的图像点。从图3.4 ~ 图3.6中可以看出,通过估计的单应矩阵H0计算的虚拟图像点与原始无畸变图像点之间存在图像偏移,采用初始摄像机畸变参数校正后的图像点与原始无畸变图像点之间也存在图像偏移。因此,可以利用上述虚拟图像点与实际点之间的偏移量,采用非线性迭代优化算法进一步优化摄像机畸变参数。
4. 优化结果
通过LM优化算法优化初始单应矩阵与畸变参数,迭代终止条件为:在迭代优化过程中,若迭代次数大于5000次或误差和小于10-30,则终止迭代。迭代的目标函数为
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-63-2.jpg?sign=1739483513-iFnPuUbOs1WoftKbM6QTHSD6DkI1qihE-0-8dd38e823e3220dffa48b561f2c5d0b9)
对初始计算出的单应矩阵和畸变参数同时优化,最终优化出的结果如表3.3所示。
表3.3 优化后的单应矩阵与畸变参数
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-64-1.jpg?sign=1739483513-lS8p0N3R5gw1vEAzVCVi5HqjIDoBflOe-0-e0e45aad70af282742170fedaf1059f9)
优化后的图像点如图3.7所示。
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-64-2.jpg?sign=1739483513-jiHM6610vc7bDPamExAL0psogZH4i4iQ-0-8e58de0cbcdf135b5f8f1ff28bcdb594)
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-65-1.jpg?sign=1739483513-9ydWc5MPotBnykXXd3YvYuu8fhzVVbc8-0-62bb855b3513d5bb1b0fc73278c3bf5e)
图3.7 优化后的图像点
从表3.1 ~ 表3.3中的单次模拟实验结果可以看出:在无噪声情况下,MECDPSI算法优化参数后的单应矩阵与畸变参数可以收敛到真值;随着噪声的增大,单应矩阵及初始畸变参数的估计可靠性变差,优化参数只能收敛到真值附近,但对于畸变参数而言,单应矩阵收敛效果更好。
3.4.2 多次实验结果
由于加入噪声的随机性,一次实验结果并不能有效体现MECDPSI算法的性能。因此,本节对畸变参数的估计进行了多次实验。多次实验条件如下。
(1)保持摄像机内参数不变。
(2)保持摄像机畸变参数不变
(3)随机产生摄像机旋转矩阵与平移向量(R,T)。
(4)每次生成的模拟图像大小为800像素×600像素。
(5)每次主点为图像中心点:(400,300)。
(6)在同一噪声水平下进行50次和100次实验,并计算所估计畸变参数的均值与方差。
采用两组不同的畸变参数对MECDPSI算法进行多次验证。第一组实验设置畸变参数值[k1,k2]=[1.6000E-08,2.5600E-13],分别在无噪声、噪声水平为[-1,1]和噪声水平为[-2,2]的随机噪声下进行50次与100次实验,最终畸变参数均值、方差如表3.4所示。
表3.4 在多次实验条件下,第一组畸变参数下估计值的均值和方差
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-66-1.jpg?sign=1739483513-x1vAhR0z2Z2LdXHqBjXM4Ui5edak3rep-0-b7a62b21a46dc9881eb635bd42800dac)
(续表)
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-67-1.jpg?sign=1739483513-yDClhis5Fk3ckgXiudee5L8zxyDXQvny-0-dfe470af1aaa687c6b7488585536ca23)
第二组实验设置畸变参数值[k1,k2]=[1.0000E-04,1.0000E-09],分别在无噪声、噪声水平为[-1,1]和噪声水平为[-2,2]的随机噪声下进行50次与100次实验,最终畸变参数均值、方差如表3.5所示。
表3.5 在多次实验条件下,第二组畸变参数下估计值的均值和方差
![](https://epubservercos.yuewen.com/F7032C/19118080201961406/epubprivate/OEBPS/Images/38612-00-67-2.jpg?sign=1739483513-gQbMYRCkojJRHVslMBkA8ZvdMCGwIG62-0-6386f716840854fae1eeae47d25cca06)
从表3.4与表3.5中可以看出,在摄像机畸变参数较小的情况下,图像中的随机噪声对摄像机畸变参数的估计值影响很大。随着摄像机畸变参数的增大,图像中的随机噪声对畸变参数的影响随之变小。