直接法估計相機位姿(inverse compositional)

直接法是用于視覺里程計估計相機位姿的一種重要方法。相比于其他依賴幾何特征做相機位姿估計的方法,直接法具有無需計算特征點、不會丟失圖像信息的特點,并且在缺乏幾何特征的場景,比如白墻或者走廊等依然可以有效的工作。


下面我們就對直接法做詳細(xì)的說明:
直接法最直觀簡單的應(yīng)用在于RGB-D相機,這種相機可以得到同一時刻RGB圖像和深度圖像,根據(jù)深度圖像可以得到每一個像素點在三維空間中的坐標(biāo),所有的這些三維點就形成的被拍攝場景中物體的surface,同時也知道每一個surface點對應(yīng)的顏色信息。相機在運動過程中會產(chǎn)生一系列連續(xù)的RGB-D數(shù)據(jù),給定了前后兩幀RGB-D數(shù)據(jù),也就是連續(xù)兩幀的surface和RGB信息,我們就可以找到一個變形(warp),使得后一幀的輸入圖像與前一幀的模板圖像相配準(zhǔn)(alignment)。這個warp代表了我們要尋找的相機位姿的變換。

1、必備知識點
1-1 圖像配準(zhǔn)

關(guān)于圖像配準(zhǔn)的方法,請參考博文對三種圖像配準(zhǔn)方法的說明,其中詳細(xì)說明了三種圖像配準(zhǔn)方法的思想和算法流程,由于inverse compositional方法效率最高,不需要迭代地計算Hessian矩陣,這里,我們在介紹相機位姿估計時仍然選擇應(yīng)用最廣泛的inverse compositional method來介紹。如果要更加詳細(xì)的了解有關(guān)圖像配準(zhǔn)方面的知識,可以閱讀參考文獻[1]。

1-2相機模型、剛體運動模型和李代數(shù)

這部分內(nèi)容可以參考博文相機模型、剛體運動模型與李代數(shù)。這篇博文對上述幾個方面進行了簡要的介紹。如果要對這部分內(nèi)容做更深入的了解,可以閱讀參考文獻[2]。

2、inverse compositional estimation of camera pose

我們依舊參考圖像配準(zhǔn)中inverse compositional 方法,算法迭代更新方式如圖1所示。


圖1.算法迭代更新公式

泰勒展開線性化如圖2所示:


圖2.線性化求解過程

算法流程圖如圖3所示:
圖3.inverse compositional算法流程

下面我對上述公式中出現(xiàn)的符號做相應(yīng)的解釋:
▽T指的是模板圖像T在x方向和y方向上的梯度圖,如圖4所示:


圖4.模板梯度

變換矩陣W對未知參數(shù)的導(dǎo)數(shù)即J草編矩陣可以用鏈?zhǔn)角髮?dǎo)法則來計算,即如圖5所示。
圖5.Jacobian矩陣

[1]Baker S, Matthews I. Lucas-kanade 20 years on: A unifying framework[J]. International journal of computer vision, 2004, 56(3): 221-255.
[2]Ma Y, Soatto S, Kosecka J, et al. An invitation to 3-d vision: from images to geometric models[M]. Springer Science & Business Media, 2012.

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 一.Android中開發(fā)相機應(yīng)用的兩種方式 Android系統(tǒng)提供了兩種使用手機相機資源實現(xiàn)拍攝功能的方法,一種是...
    GB_speak閱讀 6,054評論 2 25
  • 本文介紹一種單目視覺里程計的方法,重點說明當(dāng)前幀的半稠密深度圖估計過程,估計到的半稠密深度圖反過來又可以用于跟蹤當(dāng)...
    變胖是夢想2014閱讀 10,499評論 0 2
  • 本文將介紹如何根據(jù)相機在不同位置拍攝的兩張圖片恢復(fù)出相機的運動。在多視圖幾何學(xué)中,這被稱為對極幾何。 一、對極幾何...
    金戈大王閱讀 15,827評論 9 7
  • 前面用了好幾篇文章介紹特征點法的相機位姿估計,本文則換一種思路,介紹近年來日漸流行的直接法。 一、直接法 與“光流...
    金戈大王閱讀 6,573評論 0 1
  • 音樂類手游有不少 節(jié)奏大師曾經(jīng)風(fēng)靡一時 但它的逼格實在…… 恩所以小高今天整理了一些高顏值音樂手游 大琴師貳 ▼ ...
    游戲梵高_梵小高閱讀 1,877評論 0 0

友情鏈接更多精彩內(nèi)容