教育资源为主的文档平台

当前位置: 查字典文档网> 所有文档分类> 工程科技> 机械/仪表> 基于有理函数式镜头畸变模型的摄像机标定_黄军辉

基于有理函数式镜头畸变模型的摄像机标定_黄军辉

上传者:陈清才
|
上传时间:2015-05-05
|
次下载

基于有理函数式镜头畸变模型的摄像机标定_黄军辉

图像;识别;视觉

第41卷 第5期2014年5月

中 国 激 光

Vol.41,No.5

,Ma2014y

基于有理函数式镜头畸变模型的摄像机标定

黄军辉 王 昭* 薛 琦 高建民

()西安交通大学机械制造系统工程国家重点实验室,陕西西安710049

摘要 摄像机成像模型是决定视觉测量精度的关键因素之一。随着视觉测量精度的要求越来越高,提高摄像机模型和标定的精度是解决该问题的主要手段。将一种新的有理函数式镜头畸变修正模型引入到摄像机的成像建模以更好地修正镜头畸变引起的误差,从而提高摄像机成像模型的精度;并提出一种两步求解以及分步迭代优化中,

的方法精确求解成像模型中各参数,以解决有理函数式畸变模型参数无法直接求解的问题。实验结果表明,基于新畸变修正模型的摄像机成像模型比常规畸变修正模型的标定精度有显著的提高,并且新模型对大误差的控制更从而可整体提高视觉测量的精度。有效,

关键词 视觉光学;标定;有理函数式;畸变

:/中图分类号 TP391   文献标识码 A   doi10.3788CJL201441.0508001

CalibrationofCamerawithRationalFunctionLensDistortionModel        

HuanJunhuianZhaoueQiaoJianmin W X  G gg  

(StateKeLaboratorManuacturinSstemsEnineerinXi′anJiaotonUniversitor    yyfgygg,gy,f    

Xi′an,Shaanxi710049,China) 

Abstractameraimainmodelisakefactortodeterminetheaccuracofvisionmeasurement.Withthe C           ggyy   

,idemandforaccuracinvisualmeasurementmrovementoftheaccuracofcameramodelandincreasinl          ypygy   rimarroblem.Acalibrationaremeanstosolvetheaccuracnew modeloftherationalfunctionlensdistortion             pypy  

,,modelisintroducedintothecameraimainmodelwhichcanbettercorrecttheerrorscausedblensdistortionand              ggy  ,,atherebitcanimrovetheaccuracofthecameraimainmodel.Moreovertwosteandsteiterative        - -ypyggpp   roosedreciselarametersroblemotimizationmethodistoobtaintheofcameraimainmodelandtosolvethe               pppypppgg  

thearametersoftherationalfunctionlensdistortionmodelcannotbesolveddirectl.Theexerimentalresultsthat               pypdemonstratethattheaccuracofthecameraimainmodelwiththenewdistortioncorrectionmodelisbetterthan               ygg  

,theconventionalmodelandthenew modelcanalsoeffectivelreducethelareerrors.Thereforethenewcamera             yg imainmodelandcalibrationmethodcanimrovetheaccuracofvisualmeasurementcomrehensivel.          ggpypy  

;;;Kewordsisualoticscalibrationrationalfunctiondistortion v  py OCIScodes50.0155;150.1488;330.4060;080.3630  1

1 引  言

基于摄像机的视觉测量是三维测量领域中一个极其重要的测量手段,其具有非接触、测量速度快和精度较高等特点,被广泛应用于产品质量检测、逆向工程、三维人体扫描、文化遗产保护等诸多领域

]1-3

。尤其在工业产品的质量检测中,测量精度中[

进行了深入广泛的研究,例如,测量模型的改进、标定方法的优化以及特征提取精度的提高等。其中,测量模型为视觉测量的基础,也是影响测量精度的最直接因素。

]4

、目前,摄像机成像模型主要有针孔成像模型[

]]56

双平面模型[以及相对应的改进模型[等。其中,双

的高要求促使各学者们对影响测量精度的各个因素

;收到修改稿日期:2013102920131202  收稿日期:----

)基金项目:国家自然科学基金(61078042

平面模型引入的待求解参数过多,存在过分参数化的

,:作者简介:黄军辉(男,博士,讲师,主要从事光学三维测量方面的研究。E-m1984—)ailhhuan84@gmail.comjg:w通信联系人。E-mailanzhaoail.xtu.edu.cn@mgj

05080011-

图像;识别;视觉

中   国   激   光

倾向,求解精度不稳定,因而,现今最常用的仍为各种改进的针孔成像模型。由于镜头加工或组装等原因,成像中总会产生或大或小的镜头畸变。故需在前述以解决镜头畸变带来的成像模型基础上加入修正项,

误差,获得更高的测量精度。现有的镜头畸变修正模

]7型主要有:径向与切向畸变模型[及基于该模型所提]8出的对数或多项式鱼眼镜头畸变模型[等改进模型、]]910

、视场畸变模型[分式模型[以及全景环形透镜校]11

正模型[等。各模型具有自身的特点及局限性,例

有理函数式畸变模型具有最佳的畸变修正效果。本文在此基础上,将该新模型引入到摄像机成像模型中,建立新的摄像机成像模型,以提高摄像机成像精解决有理函数式镜头畸变系数的求解问题,并通度,

过实验分析新模型的适用性。

2 有理函数式镜头畸变模型

为适应透视及非透视光学系统的成像过程,

[13]

以表达物Grossberg等引入了虚拟的光线像素,

空间的入射光线到物理感光元件上的映射关系,即

如,目前应用最广或具有明确物理含义的径向与切向但一般对高阶畸畸变模型对各类型畸变的适用较广,

变(例如鱼眼镜头)的修正效果不明显;针对鱼眼镜头提出的对数鱼眼镜头畸变模型,对高阶的畸变修正效

]12

。因此,但对低阶畸变修正效果不大[需要果很好,

无论光线经过怎样的路径到达感光元件(成像光学器件可为反射镜、棱镜或其他,感光元件也可是电子,,芯片或胶片等)将摄像机视为一个“黑匣子”忽略以虚拟光线经过摄像机内部光学器件的具体过程,的光线像素代替实际感光元件,通过光线像素为中间量搭建起理想像点ip与实际含畸变像点i之间的

)关系。入射光线将直接成像于光线像素,如图1(a()(所示。图1中,感光元件上的某点i为其对au,v)而P应入射光线上的任意点Pi的像,i即为构造的

16]

,不仅只虚拟光线像素光线像素。根据全光函数[

建立一种既能满足低畸变的修正要求又可实现大畸随着应用需求或变修正的镜头畸变修正模型。此外,

很多成像设备并不满足针孔模感光器件的不断发展,

型,例如,折反射系统、广角折射系统以及复合摄像机

]13

,等非透视成像系统[此时沿用常规的透视投影及

径向与切向畸变修正模型无法保证成像精度要求。因此,也需要重新建立一个更能满足非透视成像系统成像精度的模型。

[13]

2001年,Grossberg等提出虚拟光线像素的可将任意物理光学成像系统视为一个“黑匣概念,

上成像,因此,光线像素有一条入射光线在i(u,v)代替实际感光元件后将在某空间位置pi接收来自各个方向qi的入射光线。由于光线像素可在实际

入射到感光元件的光线上移动,从而将所有光线像素移到某一个光线面(光线面由光线像素组成,可为

14]

,(),曲面或平面)如图1所示的三维曲面[而最简b

,子”通过建立“黑匣子”的成像模型以适应透视及非

[4]

在此基础透视成像光学系统。2005年,Claus等1

上,提出了一种称为有理函数式的镜头畸变校正模型,通过有理函数式建立起物理像元与理想像点之间的关系,用于镜头畸变校正。2010年,Ricolfe-

[5]

分析了多种镜头畸变校正模型,总结出Viala等1

单且最常见的光线面则为实际成像感光元件平面本使光线面能够更好地表达光学系统的成身。从而,

像畸变,进而建立理想像点与包含畸变的光线像素间的对应映射模型来进行高精度的畸变修正

内容需要下载文档才能查看

)任意光学成像系统成像示意图;()将图像坐标移至某一三维的光线面上图1(ab

))Fi.1(aDiaramofanarbitrarimainsstem;(bliftinoftheimaecoordinatestoathreedimensionalrasurface         - ggyggyggy    

在GClaus等rossber  基于该思想,g的研究

基础上将光线像素沿入射光线移至某一三维的光线面上,将含畸变的二维实际成像平面提升至三维光()线面,如图1所示。以光线面代替实际感光元件b

[14]

并用有理函数式表达摄像机任意光学系统的成像,

模型表达理想成像平面与提升后的实际含畸变的三维光线面之间的映射关系。即,为获得更高的修正精度,将图像坐标u和v提升至六维空间,理想像点

05080012-

图像;识别;视觉

黄军辉等: 基于有理函数式镜头畸变模型的摄像机标定

]与提升至六维空间的畸变点齐次坐标[uv1p,p,22

]坐标x(的映射关系为uvuv=[d,d)ddvdvd1dudu

upvpρ[

22

uuvvuv11d+a12dd+a13d+a14d+a15d+a16T22

,1uuvvuvx(uv 21d+a22dd+a23d+a24d+a25d+a26=Ad·d,d)]=22

uuvvuvd+ad+a3132dd+a3334d+a35d+1a()1

式中ρ为任一尺度因子,或投影Ad为标准的摄像机(

仪)待标定内参数矩阵,且Ad=[a11a12a13a14a15]。aaa16;21a22a23a24a25a26;31a32a33a34a351

由于在获得修正图像坐标时,利用了图像坐标多项式的商进行求解,因此,这类畸变模型被称为有图像理想点与畸变点的理函数式畸变模型。此时,映射关系表达为

22

auauvavauava1112dd1314d15d16ddp=22auauvavauav31d+32dd+33d+34d+35d+1

.22

2122dd2324d25d26ddp=22

auauvavauav3132dd+3334d+35d+1d+d+()2

视成像平面与含畸变光线面间的映射关系。其中,

4]

:不含镜头畸变的透视投影成像过程用下式表达[

up

R Ty

·′A==ρp

0 1z

11x11r12r13tx00uλu21r22r23tyy

,()30fvv00

z31r32r33tz

00011 0 0 10)式中(为成像点在世界坐标系下的三维坐x,z,1y,

[包标,′为任意尺度因子,A为摄像机内参数矩阵,ρ含u向和v向焦距fu和f倾斜因子λ,主点(uv,0,

,vR和T分别为摄像机相对于世界坐标系的旋转0)

与平移矩阵,其中R=[rrrrrr11,12,13;21,22,23;

,合并内外参数后,rrrT=[ttt31,32,33]x,z]。y,

()式可表达为3

3 基于有理函数式的摄像机模型

将上述有理函数式畸变模型引入到摄像机测量模型中,无论透视成像或非透视成像,均将摄像机整体视为一个透视投影成像系统,而在摄像机内部的实际光学成像过程则用有理函数式模型建立理想透

rrrurrrurrrutttuλλλλfu11+21+310fu12+22+320fu13+23+330fux+z0y+p

)rrvrrvrrvttv′.(4ffffv21+310v22+320v23+330vz0y+p=ρ

rrrt1313233z1简化表达为

xm1u1m12m13m14p

y,()mmm″mM5==21222324pρ

zm311m32m33111/式中ρ且有ρ″为任意尺度因子,″=ρ′tM为内外z,

参数合成后的映射矩阵,且M=[m11m12m13m14; ]。()式展开后为m2m341m22m23m24;1m32m331 

m1xm1zm1m11234

up=

m3x+m3z+1y+m3123

.22221234

p=

m3x+m3z +1y+m3123()6

式中理想像点坐标又可通过有理函数式畸变模型进行计算,即可将有理函数式畸变校正模型与理想透视投影成像模型结合起来,最终获得基于有理函数镜头畸变修正的摄像机成像模型为

p=

.22

auauvavauavamxmmzm221d22dd23d24d25d262122324

=p=22

m3x+m3zauuvvuv+1 y+m312331d+a32dd+a33d+a34d+a35d+122

auuvvuvm1xm1zm1m111da12dda13da14da15da161234

=22

m3x+m3z+1auuvvuvy+m312331d+a32dd+a33d+a34d+a35d+1

()7

05080013-

图像;识别;视觉

中   国   激   光

4 摄像机标定与分析

4.1 摄像机标定方法

)标定的目的即获得(式中a7i=1,2,3;j=ij()且a和m1,2,3,4,5,6;i=1,2,3;j=1,36=1ij(

)的各值。且m32,3,4;m4=1ij的求解现已较成熟,而在a由于理想像点未知,因而无法直ij的求解中,接求解a可通过加入某种约束的方法进行ij的各值,

例如,若赋求解。但优化求解结果对初值比较敏感,

各参数初值为0,即使加入约束条件,也极易使求解导致很大的求解误差。因此,结果陷入局部最优解,

对于有理函数式畸变模型参数的优化求解,优化前需提供一个较为准确的初值方可获得满意结果。

为获得有理函数式畸变模型的参数初值,可先)通过(式可计算将摄像机视为理想透视成像系统,6。出对应的理想像点坐标(尽管由于镜头畸uvp,p)

算得的理想像点不准确,但相比畸变像点变的存在,

更接近理想值,由此可算得a即,先假设镜ij的初值。将实际像点(头不含畸变,uvd,d)直接视为空间点()式、并由(空间点(x,z)的理想成像点,6x,y,y,

z)及其对应像点(uvd,d)列出线性方程组求解出)式计算出各空间点(再重新通过(m6x,y,ij的值;

,再与实际像点(一z)的理想成像点(uvuvd,d)p,p))式算得a起代入(2ij。

然而,由于mmiij求解过程中忽略了镜头畸变,j

的求解结果必然包含误差,导致aij的求解结果也具

有一定的误差,因此,再作进一步的非线性优化,优化目标函数为

F(M,Ad)=

i=1

22

[(,u′uv′v--ii)+(ii)]pppp∑

()8

(式中N为像点个数;为由有理函数畸变修u′v′i,i)pp)式及实际像点计算获得的对应理想像点坐正的(2()标,为(式及物空间点计算获得的对应理uv6i,i)pp想像点坐标。

需注意的是,若m由iij和aj同时进行优化求解,

即(和(均为计算于缺乏约束基准,u′v′uvi,i)i,i)pppp值,即使目标函数的误差达到了最小,优化结果亦产生较大的求解误差。因此,在可能陷入局部极值,

优化过程中仍需进行分步迭代优化。

综上,整个标定过程通过以下步骤实现:)1miij和aj初值的获取

mi=1,2,3;①忽略镜头畸变影响,j=1,ij()视为待求未知量,且m3将物空间标定2,3,4;4=1

)代入(点(x,z)及其对应实际像点坐标(uv6y,d,d)式,仅需6个标定点及其像点列出对应线性方程组可获取m11个待标定参数值;1~m33共1

)式将标定点物空间坐标代入(6②获取mij后,;)式建立含a计算对应像点坐标(再基于(uv2ip,p)j(,,;,,,,,;)为待求参且ai=12323456j=136=1

代入计算获得像点坐标(和数的线性方程组,uvp,p)

图2标定过程流程图

rocessFi.2Flowchartofthecalibration    pg

05080014-

图像;识别;视觉

黄军辉等: 基于有理函数式镜头畸变模型的摄像机标定

,采用9个点列出对应的线实际含畸变像点(uvd,d)

性方程组便可线性求解出aa7个未知参数。11~35共1

由于未考虑镜头畸变,计算获得的m理想像ij、及a点坐标(uvip,p)j均将存在偏差。

)2miij和aj的分步非线性迭代优化

采用非线性优化法(如Levenber①固定m-gij,优化参数a直至(式计算误差Maruardt算子)8)qij,

小于设定值或迭代达到最大迭代次数;

在a固定a采用非线②同理,iij优化结束后,j,

性优化算法优化m直至(式计算误差小于设定8)ij,

值或迭代达到最大迭代次数;

直到(式计算误差小于设8)③重复上述过程,

置值或迭代达到总体迭代次数。

上述求解过程不仅解决了优化过程中aij初值获取困难的问题,而且通过aiij和mj的分步迭代可减小二者在求解过程中因耦合导致求解结果不准确的问题。

4.2 标定实验与分析

为验证上述标定模型及方法的有效性,搭建的实验平台如图3所示。标定板为一个含11×9白色圆点的黑底铝合金平板,有效标定范围为并将之安装在一个高精度的一维250mm×200mm,平移台上。通过平移台可获得不同深度方向上的三

同时,由待标定摄像机获取不同位置(维标定点,z=,,,,,,下的标定板图像

内容需要下载文档才能查看

。-50-30-100103050mm)

图3摄像机标定实验台

Fi.3Exerimentalofcameracalibrationlatform    gpp

为分析该模型在精度和速度方面的特点,在相同的实验条件下,对相同的拍摄图像采用目前应用最广泛的径向与切向畸变修正模型进行了对比分析。径向与切向畸变模型亦采用分步迭代优化的方对比二者的优化效率,并对法进行参数的求解优化,

各标定点的对应投影点与实际像点间的误差进行精度比较,优化求解结果如表1和图4所示。待优化将平移台移至另外四个非标定位置求解结束后,

(进行精度检测,由于标z=-40,-20,20,40mm)

定板z值通过平移台给出,因此,可通过标定点像点坐标值直接反推求出其对应的x和y值,检验结果如表2所示。

表1两种镜头畸变模型的摄像机标定性能比较

erformanceTable1 Comarisonofcameracalibrationbetweentwotesoflensdistortionmodel            ppyp

Otimizationresiduals/pixel p

oflensdistortionTe    yp

Time/s

Averaeg

-5 

Rationalfunctionmodel9.892564×10   6 0.Radialandtanentialmodel4.790.0001    3  g

u 

Standard0.0314 0.1562 

Max

Averaeg()-5 

0.10726779×10 0.0.7886-0.0048 

Standard0.0423 0.1459 

Max

()0.16180.6119

表2两种镜头畸变模型的x-y向精度检验

Table2 Accuractestoftwotesoflensdistortionmodelinxandirections           yypyd 

/Rationalfunctionmodelmm   

Position

Averaeg

Standard

deviation0.0051 0.0073 0.0047 0.0069 0.0071 0.0068 0.0080 0.0063 0.0066 0.0070 

Max

()absolute0.0163 0.02340.0187 0.02830.0243 0.03030.0238 0.02890.0243 0.0303

/Radialandtanentialmodelmm   gAveraeg0.0018 -0.0041 0.0064 -0.0077 0.0090 -0.0084 0.0050 -0.0066 0.0056 -0.0067 

Standard

deviation0.0239 0.0207 0.0231 0.0206 0.0239 0.0197 0.0256 0.0201 0.0242 0.0203 

Max

()absolute0.05270.05260.05460.05330.05980.04760.07500.04670.07500.0533

z=-40mmz=-20mmz=20mmz=40mmStatistics

x yx yx yx yx y

0.0028 -0.0050 0.0064 -0.0084 0.0078 -0.0089 0.0050 -0.0071 0.0055 -0.0074 

05080015-

版权声明:此文档由查字典文档网用户提供,如用于商业用途请与作者联系,查字典文档网保持最终解释权!

下载文档

热门试卷

2016年四川省内江市中考化学试卷
广西钦州市高新区2017届高三11月月考政治试卷
浙江省湖州市2016-2017学年高一上学期期中考试政治试卷
浙江省湖州市2016-2017学年高二上学期期中考试政治试卷
辽宁省铁岭市协作体2017届高三上学期第三次联考政治试卷
广西钦州市钦州港区2016-2017学年高二11月月考政治试卷
广西钦州市钦州港区2017届高三11月月考政治试卷
广西钦州市钦州港区2016-2017学年高一11月月考政治试卷
广西钦州市高新区2016-2017学年高二11月月考政治试卷
广西钦州市高新区2016-2017学年高一11月月考政治试卷
山东省滨州市三校2017届第一学期阶段测试初三英语试题
四川省成都七中2017届高三一诊模拟考试文科综合试卷
2017届普通高等学校招生全国统一考试模拟试题(附答案)
重庆市永川中学高2017级上期12月月考语文试题
江西宜春三中2017届高三第一学期第二次月考文科综合试题
内蒙古赤峰二中2017届高三上学期第三次月考英语试题
2017年六年级(上)数学期末考试卷
2017人教版小学英语三年级上期末笔试题
江苏省常州西藏民族中学2016-2017学年九年级思想品德第一学期第二次阶段测试试卷
重庆市九龙坡区七校2016-2017学年上期八年级素质测查(二)语文学科试题卷
江苏省无锡市钱桥中学2016年12月八年级语文阶段性测试卷
江苏省无锡市钱桥中学2016-2017学年七年级英语12月阶段检测试卷
山东省邹城市第八中学2016-2017学年八年级12月物理第4章试题(无答案)
【人教版】河北省2015-2016学年度九年级上期末语文试题卷(附答案)
四川省简阳市阳安中学2016年12月高二月考英语试卷
四川省成都龙泉中学高三上学期2016年12月月考试题文科综合能力测试
安徽省滁州中学2016—2017学年度第一学期12月月考​高三英语试卷
山东省武城县第二中学2016.12高一年级上学期第二次月考历史试题(必修一第四、五单元)
福建省四地六校联考2016-2017学年上学期第三次月考高三化学试卷
甘肃省武威第二十三中学2016—2017学年度八年级第一学期12月月考生物试卷

网友关注视频

化学九年级下册全册同步 人教版 第22集 酸和碱的中和反应(一)
沪教版牛津小学英语(深圳用) 四年级下册 Unit 12
六年级英语下册上海牛津版教材讲解 U1单词
冀教版英语五年级下册第二课课程解读
外研版英语三起5年级下册(14版)Module3 Unit1
【部编】人教版语文七年级下册《逢入京使》优质课教学视频+PPT课件+教案,安徽省
北师大版小学数学四年级下册第15课小数乘小数一
人教版历史八年级下册第一课《中华人民共和国成立》
沪教版八年级下册数学练习册20.4(2)一次函数的应用2P8
青岛版教材五年级下册第四单元(走进军营——方向与位置)用数对确定位置(一等奖)
沪教版牛津小学英语(深圳用) 五年级下册 Unit 7
化学九年级下册全册同步 人教版 第18集 常见的酸和碱(二)
外研版八年级英语下学期 Module3
沪教版牛津小学英语(深圳用) 四年级下册 Unit 2
外研版英语七年级下册module3 unit2第二课时
外研版英语三起6年级下册(14版)Module3 Unit1
【部编】人教版语文七年级下册《逢入京使》优质课教学视频+PPT课件+教案,安徽省
第19课 我喜欢的鸟_第一课时(二等奖)(人美杨永善版二年级下册)_T644386
沪教版牛津小学英语(深圳用) 五年级下册 Unit 10
沪教版牛津小学英语(深圳用) 六年级下册 Unit 7
8.对剪花样_第一课时(二等奖)(冀美版二年级上册)_T515402
人教版二年级下册数学
苏科版数学八年级下册9.2《中心对称和中心对称图形》
冀教版小学数学二年级下册1
精品·同步课程 历史 八年级 上册 第15集 近代科学技术与思想文化
【部编】人教版语文七年级下册《老山界》优质课教学视频+PPT课件+教案,安徽省
《空中课堂》二年级下册 数学第一单元第1课时
沪教版牛津小学英语(深圳用) 四年级下册 Unit 8
苏科版八年级数学下册7.2《统计图的选用》
第8课 对称剪纸_第一课时(二等奖)(沪书画版二年级上册)_T3784187