影像拼接

✍ dations ◷ 2025-01-12 13:31:11 #影像拼接

影像拼接(image stitching)是指将两张或更多的有重叠部分的影像,拼接成一张全景图或是高分辨率影像的技术。影像拼接有两大步骤:影像对准(image alignment)和影像混合(blending),相关的应用有:

但并不是任意两张有重叠部分的影像都能够被拼接,被拼接的影像必须:

实作上,通常会固定相机,让影像能有相同的投影中心以利后续处理。另外影像之间重叠部分不宜太少或太多,重叠太少会让对准变得困难,重叠太多则会让混合之后的瑕疵和失真更多,适当的重叠范围为15-30度。另外,为了让拼接后的影像更符合人类视觉,在进行影像拼接之前,会先将影像投影到圆柱座标或球体座标上,

影像对准是指找出两张影像之间的变换关系,如平移、旋转、缩放,经过变换之后使两张影像中相同的部分可以重叠。影像之间的变换关系可以用一个矩阵来表示,所要求得的矩阵的未知数数量越多,代表两影像之间的关系越复杂、越难对准。举例而言,平移矩阵有两个未知数,仿射变换矩阵有六个未知数,而一般化的投影矩阵则有八个未知数。为简化问题,在拍摄影像时会尽量避免同时平移、旋转或缩放,以简化对准的难度。通常会先取得影像的特征点,再透过影像配准(image registration)完成对准。

特征点检测是指借由影像的亮度、颜色、梯度等资讯,寻找影像中的特征点的方法。在影像对准中,可以用特征点检测来取得两张影像的特征点,再借由配对这些特征点来完成对准。常见的特征点检测的方法有:哈里斯角检测(Harris Corner Detection)、尺度不变特征转换(SIFT)等,特征点通常会是影像中物体的角落,或是颜色变化大的地方。然而,因为要被对准两影像重叠部分有限,共有的特征点并不多,大部分特征点都是离群值(outlier),因此需要影像配准的技术来完成特征点的对应。

影像配准是指将影像经过变换后,使得两影像的相似程度最大的技术,计算相似程度的方法因算法而异,举例来说,两影像的方均根差即可当作相似程度的指标,方均根差越小表示影像越相似。在影像对准中,影像配准能够借由最大化影像重叠部分的相似程度,来完成影像之间特征点的对应。随机抽样一致算法(RANSAC)是影像配准最常见的算法之一,透过递回和取样,来找到最适当的变换,随机抽样一致算法并不是确定性算法,但其优点是可以在有许多离群值当中,为内群值找到一个合理的变换,适合用在离群值多的影像配准问题上。

因为视差、镜头失真、曝光差异等因素,两张已经对准的影像仍可能有明显的边界而不像一张完整的合成影像,影像混合就是指让对准后的影像能平顺地拼接的技术。常见的方法有阿法混合(alpha blending)、梯度域拼接 (页面存档备份,存于互联网档案馆)(gradient-domain stitching)等。

调整两张影像重叠部分的透明度,让衔接部分有渐层的效果。渐层范围的长度需经过调整,太长会有鬼影(ghosting)的问题,太短则会让衔接部分不自然。

完成拼接的全景图,可能因为经过圆柱投影,或是拍摄影像时没有完全水平等原因,变得歪斜、扭曲。可以再借由算法计算,将拼接过后的全景图,在少量的失真与裁切之下,调整回长方形。

相关

  • 赋形剂赋形剂(英语:excipient)为药物中附着于有效成分的天然或合成物质:1,主要在于提升药物中有效成分的作用(所以又称为增量剂、稀释剂等),或在药物最终剂型中促进溶解、吸收以增强有效
  • 洛克菲勒家族阴谋论洛克菲勒家族(英语:Rockefeller family)是一个美国的工业、政治、石油业和银行业的家庭。在19世纪末和20世纪初,约翰·戴维森·洛克菲勒和他的弟弟威廉·洛克菲勒(英语:William Ro
  • 歌剧魅影《歌剧魅影》(法语:Le Fantôme de l'Opéra)是一本由法国作家加斯东·勒鲁所撰著的爱情惊悚小说,法文版原著在1910年时出版,1911年时首度被翻译成英文版。故事中以19世纪时法国
  • 董恬董恬(1458年-?),字世良,号中阆,直隶松江府上海县人,明朝政治人物。应天府乡试第一百二名举人。弘治九年(1496年)丙辰科进士。官至大理寺少卿。正德五年(1510年),被指为刘瑾同党,革职为民。
  • 阿部正定阿部正定(あべ まささだ),江户时代大名。陆奥国白河藩第5代藩主。忠秋系阿部家13代。文政6年(1823年)出生,白河藩阿部家分家、3000石旗本阿部正藏长男。嘉永元年(1848年)5月10日,前任
  • 小莫尔特克港坐标:54°32′S 36°5′W / 54.533°S 36.083°W / -54.533; -36.083小莫尔特克港(英语:Little Moltke Harbor),是南极洲的海港,位于南乔治亚群岛,处于皮尔纳角和罗斯冰川之间的皇
  • 时间领主时间领主(英语:Time Lord),又译为时间之王,是英国长青科幻电视剧《异世奇人》中已灭绝的虚构外星人群体,主角“博士”即为其中一员。时间领主因他们可以操作时间穿越技术而得名。时间领主们在早期历史中有一名叫Omega的科学家,他发明了可以控制时间能量来进行时间旅行的手段。在终末时间之战(英语:Time War (Doctor Who))时,时间领主们与他们的母星Gallifrey被毁灭(备注),只有博士一人幸存。备注:Gallifrey后来在第七季博士之日(The Day of the Doctor)
  • 旅行者2号旅行者2号(英语:Voyager 2)是一艘于1977年8月20日发射的美国宇航局无人星际航天器,截至2020年依然正常运作,是有史以来运作时间最久的空间探测器。截至2019年8月28日止,旅行者2号正处于离太阳121.6 AU(1.82×1010 km)的位置。它与其姊妹船旅行者1号基本上设计相同。不同的是旅行者2号循一个较慢的飞行轨迹,使它能够保持在黄道(即太阳系众行星的轨道水平面)之中,借此在1981年的时候透过土星的引力加速飞往天王星和海王星。正因如此,它并没有像它的姊妹旅行者1号一样能够如此靠近
  • 第三代里士满公爵查尔斯·伦诺克斯查尔斯·伦诺克斯,第三代里士满和伦诺克斯公爵(Charles Lennox, 3rd Duke of Richmond and Lennox,1735年2月22日-1806年12月29日)18世纪积极主张改革的英国政治家,以提出改革国会的进步观点而著名。1750年继承贵族的头衔。
  • 德比郡2013年至2014年球季德比郡2013年至2014年赛季(英语:2013–14 Derby County F.C. season)是德比郡足球俱乐部在英格兰足球联赛第115个赛季,亦是第46个及连续第6个处于第二级联赛的赛季,上季以第10位结束赛季。本季球衣继续由意大利品牌Kappa制造及供应,主场维持传统的白衫黑裤白袜;而作客则为全枣红款式。球衣主要赞助广告仍然是“buymobiles.net”。粗体字为本季新加盟球员^ 注解1: 按出场次数可增加10万镑。^ 注解2: 初步与约翰·布雷福德(John Brayford)两