影像拼接

✍ dations ◷ 2025-06-23 03:07:49 #影像拼接

影像拼接(image stitching)是指将两张或更多的有重叠部分的影像,拼接成一张全景图或是高分辨率影像的技术。影像拼接有两大步骤:影像对准(image alignment)和影像混合(blending),相关的应用有:

但并不是任意两张有重叠部分的影像都能够被拼接,被拼接的影像必须:

实作上,通常会固定相机,让影像能有相同的投影中心以利后续处理。另外影像之间重叠部分不宜太少或太多,重叠太少会让对准变得困难,重叠太多则会让混合之后的瑕疵和失真更多,适当的重叠范围为15-30度。另外,为了让拼接后的影像更符合人类视觉,在进行影像拼接之前,会先将影像投影到圆柱座标或球体座标上,

影像对准是指找出两张影像之间的变换关系,如平移、旋转、缩放,经过变换之后使两张影像中相同的部分可以重叠。影像之间的变换关系可以用一个矩阵来表示,所要求得的矩阵的未知数数量越多,代表两影像之间的关系越复杂、越难对准。举例而言,平移矩阵有两个未知数,仿射变换矩阵有六个未知数,而一般化的投影矩阵则有八个未知数。为简化问题,在拍摄影像时会尽量避免同时平移、旋转或缩放,以简化对准的难度。通常会先取得影像的特征点,再透过影像配准(image registration)完成对准。

特征点检测是指借由影像的亮度、颜色、梯度等资讯,寻找影像中的特征点的方法。在影像对准中,可以用特征点检测来取得两张影像的特征点,再借由配对这些特征点来完成对准。常见的特征点检测的方法有:哈里斯角检测(Harris Corner Detection)、尺度不变特征转换(SIFT)等,特征点通常会是影像中物体的角落,或是颜色变化大的地方。然而,因为要被对准两影像重叠部分有限,共有的特征点并不多,大部分特征点都是离群值(outlier),因此需要影像配准的技术来完成特征点的对应。

影像配准是指将影像经过变换后,使得两影像的相似程度最大的技术,计算相似程度的方法因算法而异,举例来说,两影像的方均根差即可当作相似程度的指标,方均根差越小表示影像越相似。在影像对准中,影像配准能够借由最大化影像重叠部分的相似程度,来完成影像之间特征点的对应。随机抽样一致算法(RANSAC)是影像配准最常见的算法之一,透过递回和取样,来找到最适当的变换,随机抽样一致算法并不是确定性算法,但其优点是可以在有许多离群值当中,为内群值找到一个合理的变换,适合用在离群值多的影像配准问题上。

因为视差、镜头失真、曝光差异等因素,两张已经对准的影像仍可能有明显的边界而不像一张完整的合成影像,影像混合就是指让对准后的影像能平顺地拼接的技术。常见的方法有阿法混合(alpha blending)、梯度域拼接 (页面存档备份,存于互联网档案馆)(gradient-domain stitching)等。

调整两张影像重叠部分的透明度,让衔接部分有渐层的效果。渐层范围的长度需经过调整,太长会有鬼影(ghosting)的问题,太短则会让衔接部分不自然。

完成拼接的全景图,可能因为经过圆柱投影,或是拍摄影像时没有完全水平等原因,变得歪斜、扭曲。可以再借由算法计算,将拼接过后的全景图,在少量的失真与裁切之下,调整回长方形。

相关

  • 氢氧化镁氢氧化镁(化学式:Mg(OH)2)是镁的氢氧化物,为白色晶体或粉末,微溶于水,广泛用作阻燃剂、抗酸剂和胃酸中和剂。氢氧化镁在水中的悬浊液称为氢氧化镁乳剂,简称镁乳,用于中和过多的胃酸
  • 肌氨酸肌氨酸(英语:sarcosine)即N-甲基甘氨酸,或2-甲氨基乙酸,非编码氨基酸。可以由氯乙酸与甲胺反应制得。它是胆碱自然代谢为甘氨酸过程中的一个中间体。肌氨酸有甜味,溶于水。
  • 东北方言日本东北方言(日语:東北方言 Tōhoku hōgen)是一组在日本本州岛东北地方使用的方言,常被认为是典型的乡村口音。本州岛越往北,当地方言便与标准日语差异越大,甚至需要在电视中加
  • 原核起始因子原核起始因子(英文:Prokaryotic Initiation Factor,缩写为“PIF”)是原核翻译起始过程中需要利用的起始因子。已发现的原核起始因子共有三种,分别为原核起始因子-1(PIF-1)、原核起
  • 明温公主明温公主(韩语:명온 공주,1810年-1832年),朝鲜纯祖李玜与纯元王后金氏之长女,孝明世子李旲之妹。纯祖十年(1810年)十月十三日诞生,八岁受封明温公主,十四岁下嫁东宁尉金贤根。纯祖三十
  • 志志目彻志志目彻(Shishime Toru,1992年3月8日-)生于宫崎县都城市,是一名日本柔道运动员,曾获得2015年世界柔道锦标赛男子60公斤级铜牌。妹妹志志目爱也是柔道运动员。
  • 近卫军城区坐标:54°39′N 21°04′E / 54.650°N 21.067°E / 54.650; 21.067近卫军城区(俄语:Гвардейский район),是俄罗斯的一个区,位于该国西北部,由加里宁格勒州负责管
  • 杨德森杨德森(1884年?月?日-?年?月?日),字荫孙,江苏省苏州府长洲县人,宣统二年商科进士,曾留学比利时学校。
  • 布里特峰坐标:76°3′S 135°7′W / 76.050°S 135.117°W / -76.050; -135.117布里特峰(英语:Britt Peak)是南极洲的山峰,位于玛丽伯德地,属于弗拉德山脉的一部分,海拔高度3,070米,美国地质
  • 黎龙镜黎龙镜(越南语:Lê Long Kính,?-1005年),大行皇帝黎桓第9子,获封中国王(越南语:Trung Quốc vương),镇守干沱和末连县,曾在1005年两度造反,勾结御北王黎龙�并投靠其据地扶兰寨,御蛮王黎龙钉造反,御北王黎龙�后将他杀死,并投降黎龙铤。