藉由學習物體形狀之環物影片去背方法

Background Removal of Object Movies by Learning Shape Priors

柯政宏(Cheng-Hung Ko)

指導教授 ： 洪一平

國立臺灣大學/電機資訊學院/資訊工程學研究所/碩士(2006年)

https://doi.org/10.6342/NTU.2006.00139

摘要

環物影片技術已經被成功的使用在各種不同的應用中來拍攝和呈現物體。在把環物影片整合到所選擇的場景 (例如：環場) 前，有效且快速地將前景物體和背景場景分開是一項有挑戰性的工作。我們將這個問題稱之為環物影片去背。這篇論文提出一個新的環物影片去背方法，其中我們將物體的形狀資訊結合到去背的演算法當中。我們藉由使用體積最小剪割來做 3D 建模，並從當中學習到每一張影像所需要的形狀資訊。在這裡，為了改善建模的演算法，我們利用中軸來當約束。我們的去背方法只需要非常少的使用者介入，在自動的初始去背後，使用者只需選擇出可以接受的去背結果。和其他技術相比較，我們的方法不只提供了較好的去背結果，同時也有一個較好的 3D 建模結果。在環物影片去背的問題上，我們展示了令人印象深刻的改善。

關鍵字

環物影片 ； 影像切割 ； 3D 建模 ； 馬可夫隨機場 ； 最小剪割 ； 體積最小剪割 ； 中軸

並列摘要

The object movie technique has been successfully used to capture and display 3D objects for manifold applications. Before integrating the object movies into the chosen scene source (e.g., a panorama), the challenge is how to efficiently and effectively separate the background from the interesting object. The problem will be referred to as object movie segmentation. This paper proposes a new object movie segmentation method that incorporates the shape prior into the segmentation algorithm. The shape prior introduced into every image of the object movie is learned from the 3D model reconstructed by the volumetric graph cuts algorithm. Here, the constraint derived from the discrete medial axis is used to improve the reconstruction algorithm. Our segmentation method requires only a small amount of user intervention, which is to select a subset of acceptable segmentations of the object movie after the initial segmentation process. Compared to other techniques, our method provides not only the better segmentation result but also the better 3D reconstruction result. Impressive improvement in object movie segmentation is demonstrated.

並列關鍵字

Object movie ； image segmentation ； 3D modeling ； Markov random field ； graph cut ； volumetric graph cuts ； medial axis

參考文獻

method for calibrating a motorized object rig,” in Proc. Asian Conf. Computer

[1] Kaidan, Inc. [Online]. Available: http://www.kaidan.com

[2] Texnai, Inc. [Online]. Available: http://www.texnai.co.jp

[3] P.-H. Huang, Y.-P. Tsai, W.-Y. Lo, S.-W. Shih, C.-S. Chen, and Y.-P. Hung, “A

[4] C.-W. Chen, L.-W. Chan, Y.-P. Tsai, and Y.-P. Hung, “Augmented stereo panoramas,”