歐陽明臺灣大學:資訊工程學研究所曾照涵Tzeng, VirginiaVirginiaTzeng2010-06-092018-07-052010-06-092018-07-052009U0001-1908200912522100http://ntur.lib.ntu.edu.tw//handle/246246/185425我們提出一個用於視訊的人臉置換(face replacement)系統。這個系統以三維形變模型為基礎，對於來源人物(source subject)我們只需要拍攝一到兩張照片，就可以將擬被替換之目標人臉(target face)替換為同一方位(pose)、表情(expression)及光照(illumination) 下之來源人臉(source face)。關於人臉置換的相關研究不少，但多是用於圖片，市面上亦存在很多影像處理軟體可以作圖片上的人臉替換，前提是目標人臉和來源人臉的方位不能差太多，這類軟體在處理上非常耗時耗工，且需要具有一定的專業技術，我們所提出的系統相較於他們，因為是3D操作，可生成不同方位之人臉，使用上較為簡單且省時省力。這個系統可以應用於電影特效工業或一般的娛樂活動。們的系統共由三個人的工作組合而成，總共分成以下幾個主要模組，包括：人臉校準、方位估計、人臉擷取、三維人臉模型生成、表情估計及生成、打光估計及人臉重新打光、人臉影像生成、影像合成。在這篇論文中，我的模組主要探討的主題是方位和打光估計。In this thesis, we present a system for face replacement in video. Our approach is based on 3D morphable model, so the input is reduced to one or two pictures for the source face to be placed in. Then, we can replace the target face in the target video with the source face, under similar pose, expression, and illumination.ost digital processing software can perform image face replacement only when the poses for the source and target faces are similar, and the manipulation process with those software is often time-consuming and labor-intensive. While most previous work also focuses on image face replacement, our system performs face replacement in video. Our system is useful in the special effect industries and entertainment.ur system consists of several modules: face alignment, pose estimation, expression estimation, face extraction, morphable model fitting, face synthesis, lighting estimation, and composition. In this thesis, we focus on pose and lighting estimation.目錄謝 i要 iibstract iii錄 iv目錄 v一章 序論 1.1 研究動機 1.2 問題敘述 1.3 論文架構 3二章 相關研究 4.1 人臉方位估計 4.2 人臉打光估計 5.3 人臉置換系統 7三章 系統架構 10.1 系統元件介紹 10.1.1 輸入與輸出 10.1.2 模組介紹 10.1.3 系統資料庫 12.2 人臉置換流程 12四章 人臉方位估計 14.1 方位估計 14.2 結果 21五章 人臉打光估計 25.1 打光估計 25.2 結果 30六章 結論與未來工作 34.1 結論 34.2 討論 35.3 未來工作 36七章 參考文獻 372518218 bytesapplication/pdfen-US人臉人臉置換方位估計打光估計三維模型faceface replacementpose estimationlighting estimation3D modelthesishttp://ntur.lib.ntu.edu.tw/bitstream/246246/185425/1/ntu-98-R96922035-1.pdf