MATLAB与语音视频技术课程.docxWord

　　图拼接是像个日一益行流的研领域究他已经，成为照相绘学、图计 算机视、觉图处理像计算机和图学形研究的中热点图。像接拼解的决问 一般题，式过对齐一系通空间重叠列的图像，成一个无缝的构高、清晰 的像图，它具有单个比像图更高分的率和更辨的大视野。 虚拟现实领在域中人们，以利可用图像拼技接术来得到视角的宽 像图或36 0全度景图，用像虚拟来实际场。景种这于全基景图的拟虚现实系统 通，过全图景深度的息抽信，恢取复景的三维信场，息而进建 三立模维。型这系统个允用户许在拟虚环中的境点一水平作视环以 一定范及围的俯视和内视，同时仰许在允环的视过程中动地改变态 焦距 。医学在图像理处方面显，镜或超声波微视的较野小，医师法无通过一幅 像进行图诊，同时视于对大标目图的数像据测也需量把不要完整 图的拼接为一像个整体所。以把邻的相幅图像各接拼起来是现实远程数 测据量远和程会的诊键环节关。圆 遥感在术领技中，域用利像拼接图术技中的图像匹配术技可以对来自同 一域区两的幅或多幅图像行进比较，可以利用图像拼也技接 将遥术感星拍卫到摄的失真有地图像面拼接比较准成的确整完像，图作 进为一研步究的依。据 以从方面可以看出，上像图接拼术的应技前用十景分阔，广入深研究 像图接拼技有术很着要重意的。义

　　、图一匹配 像二图像、合融

　　像图匹是指依配据一相似性度量些来决定图像 的变间换数，使参不从传感同器不、视角同、同不时 间获取同一场的景的两幅或多幅图，像换到同 变坐标一系，在下素像上层到得佳最配匹的程。过图像 匹配不是但图像拼技术中接的难点而且，还是进 图行拼接时像为关键的最步一，它接影响直到整 个图像接过程拼中的接效果拼和拼接速度。

　　基于图像度灰的匹配基于模的板匹配 于基变域的换匹 配于基特的征配匹

　　基灰度于的匹方法直配利接用像图灰度的值确来定 图像空间变换，的充利用分像图中包含的所信，息因 该方法也此称为基被于图整像体容内匹配方法的基 于灰。的度全自动匹配法的基方本思是：首想先待对匹配 的图像做何几换，变后根据然度信息的统灰特计 定义性个目一标函(数如信息互最、均方小等差)为作 参考像图与换变像图间的相似性之度量配准，数参在 标目数的函极值取处得并，此以作配准的判决为则准和 配参数准最优的化目函标数，而将从准问配题转化为多元函 数极值问题的最，通过后定一最的化方优法 求得正确的几何换参数变 基于。像灰度的图法不方需对图像进行分割和要特征 提取，以所精高度,鲁棒性。但这种匹好方法对灰配 度换非常敏变感没，充分利有用灰统计特性，度每对 一点灰度的息依赖较大信

　　。基模于的匹板即是配在像图已的重叠区知域中 裁一块剪形矩域区为作模，板和搜索被图中同样像 大的一块区小进域对比，行据根似程度来相确定最佳的匹 位配置。板模匹包配4括个方：面模①特 征选取；②板基准模的板取，选定基准确板的模小 和坐标定位；③模板大配匹的相似度性量④匹；配 板模搜索策的略。

　　基于变

　　域的换配匹法方有：于傅基里变换、叶 于基aGobr换变和于基波小变的换配匹。其最经 中典方法的由Ku是ling和Hnesi在917年提出5的基于 里叶傅变的换相位相法关。该方法待对匹图像配进 行速傅快叶里变，将两换图幅换变频域，然后到通过它 们互的功谱率算出两幅计图像间的平移量对。于 在存旋变转换的像，图以将图可坐像变换标到极坐标 下，将旋转量转为换平量移计算来。

　　基于像特图的匹配方征法，先首要待对匹的配两 图幅进行像理处，取提足特定应用要满的特征 集，然求将后这两特组征进集匹行对应，生配一组成对应特 征集，最对后用利这特征组之对的相间应关 系计估全局变换出数参。于特征的基图像匹配要主包括 四个步。 骤①特征取提：根据匹配待图的像度性灰决质使用定 种何征进特行匹。配般要一选取的求特征应明该， 易于提取显，并在参且考像的图待匹图配像上有足 够的多布分。常用特征有边缘的征、特区特域征、点特 和高征模层等；

　　型

　　取提特点征②

　　特征配：匹提取在出的特集征间之建立个一对 应关系通常，用利特征身的属自描性述结特合征所 的在区域灰的以及特征度间的之几何拓关系来扑确定特 征的对应。间用的特常匹配的方法有空征相间、 关描符述法、方弛松法方金字和塔法算； ③模型参等估计：数参在考像和待拼接图图重叠像区域 中到匹找配征特之集，后需就要构造换变型，模即 过通图之间像部元素的分匹配系关确定两图像 的幅换变关。根系变据换模型可以将待就接图拼变像 换到参图考像坐标的下系

　　④图；变换像和灰插度值：待将接图拼变换到像考参 图坐标系下像。

　　待拼接

　　源的图像由，拍于时摄照、光野、视点地的 差异等不因素的影响定重叠区域可能，两幅图在 中像较大的有别差如。直接对这样果的图像进简行单的叠加 合，拼到得拼接图的在接拼置位会存在上 显明拼的缝和接重叠区域模糊失的现象真

　　。果不如很好能地处理像拼接图的时接拼问缝，题就无 法到得正真义的意景全。图图融像技合术就是要消 除拼图像的接拼接问题缝，即消拼除图接中 的像

　　“鬼影”“曝和差光”异，获真正得意上义的 缝拼接图像无。

　　用利个多传感提器的冗供信息余可高提合融图像的精确性及 靠可。融合性图具有较强的像鲁棒性即，使别个传 器感故也不障对会合图像产生融严重影响 利。用个多感器提传供互的信补，息合后融图像包含的了 为全更、丰富面信息，其更的符人合机或器的觉特视性、更有 利于对像图的进步一分处理以析及自动目标别。识 不在利环境的件下(例如烟、条尘云、雾、、等雨) 通过，多传感图像 融器合可以善检测性能。例如改，在烟、尘、云、 雾境下，环TV可(光)见像质图差量(甚至法 无看清标) ,目而毫米雷达波获得图的对于烟、像云、、尘雾却 有较强穿透的能力，管信尽号有会些减，衰但仍可 获然得清晰的较图。像 前，图目像合技术在融多领许都域到了广得的应用， 包泛遥感括像图的析 和分理处自、动别识计、机算视、医 觉图学处像。理

　　图

　　像合融的骤一步分为两般大：预处步阶理段和融合阶段。

　　,,,,, ,,,,, ,,,,,, ,

　　,素级图像融像合是指严格在配准件下条对各传器 输出的感号直信进行信接息综合处的理程过。素级像 图融合是直接在原像数始据层上行融合进，该层的次 合准确融性最高相比，他其次层上的图像融合该次层上的 像图融具有的合更精、确更富丰、更可靠细的节 息信有利，于图像更一进步理的解分析与像。素级图 融合是像特级和决征级策图融合像的基，也是础前应 用目最广图泛融像合方。式但素级像图像融合是有也缺 点，的点缺是处理预信息量最的大，理处时间较长 对通信，带宽要求的高，因在此层析上进此图像行合 融前必之须先参加融合对的像进行图精的确准配，大加 了作量工。

　　像级数据融素原合示意理图

　　.对1图像R的GB空间的R、中、BG换，得变到IH、 、三S分量个 .2再亮度将分I按规量融则合得，新的到亮度分量3 .再ne将I、w、S反H换回R变BG间，空成完合融过 程

　　特征级像图融是指合不同对传感器多源的信息 进特行提征取包括(形、状缘、区边域、廓、纹轮 、理等),角然后对从再多个感传器得的多获个 征信特进行息合综的析分和处理的过程特。征图像 融合属级中间层于次为，策级决像融图合做准备， 既它保留了重信要息，对信息有行进压了缩便，于实时处 。理相对但于像级图素融像，合征级融合特信息丢失最 。多

　　征级特数融据原理示合意图

　　决策图像级融合是指对每个图像特的信息进征 分类、识行等处理别形成相，的应果，结行进一进步的融 过合，最程的决终策结是全局果优决最。策 策级图决融像

　　合是种更高层一次信息融的，合其结果 将为种各制或控策决供依提据。策决级图融合像方的法主要是基认知模于的型 方法需要大型，数据和专库决家策系统进，分析、 行理推识别、判和决。种此融实时合好性并，且有 一定的错容力，但能其预理处代较价，图高中的原 像信息的始失损多最。决策级

　　据数合原融示理图意

　　本文主要是图对像接拼技所术做一个的究，研像拼接图技术作为数 字像图处理领的一个重域要分支，在拟现实领域虚、医学图像 处领理域、感技术领域遥军和事域中均领广泛的 有用应尤。是其全图像拼景接技术解，决了很以久存来的图 像在野视图和像分率矛盾辨问的题，过全通拼接景术技可以 到得视宽野围的范高分率辨的图新像 本文。首先介了绍像拼图接技术意的、研义究景及拼背技接术 的点特，等从而示展了图像接拼技术广泛的应用景。然后前 对图像接的基本拼流和关程键术技了阐述做，重点介绍了图像 拼接技术中图的像配和图像融匹合术技

　　。