莊永裕臺灣大學：資訊工程學研究所沈允中Shen, Yuan-ChungYuan-ChungShen2007-11-262018-07-052007-11-262018-07-052006http://ntur.lib.ntu.edu.tw//handle/246246/53708在這篇碩士論文中，我們提出了一個紋理合成的方法，不需要真實的物理反射模型，而得以實現擬真的材質繪圖。這個方法是藉由觀察現實生活中的物體都含有某種紋理重複的出現在物體的表面，而這些重複出現的紋理可以形成一個較為稀疏的紋理函數模型。我們的目標是利用拍攝不同光源的照片來還原出物體所隱含的材質及可能的物理反射特性。這個方法不需要複雜的儀器來拍攝，並且利用紋理生成的方法還原一個近似的紋理函數模型。 我們的輸入是多張拍攝的影像。這些照片的視角是固定的，不同的只是光源的方向。我們利用Photometric Stereo來估計物體的幾何形狀及物體本身的顏色。並且把物體上的每個點根據自身顏色以及週遭的圖樣做一個分類，當作這個物體紋理的元素。利用這個猜測出來的紋理特性，我們可以對這個材質做不同光源下的反應模擬以及對不同物體作材質的轉換。In this thesis, we present a texture synthesis method for realistic rendering without acquiring the actual reflectance properties. The method is based on the observation that many objects have texture repeatedly laid on different locations of their surface. These samples form a pretty sparse set of BTFs. Our goal is to extract the underlying texture from photographs of the object, and to transfer the texture to other objects under different illuminations. This method is very simple and provides pseudo-BTFs reflectance, using texture synthesis approaches. The input data is acquired directly from a few of photographs. These photographs contain appearances of the object with different lighting directions at a fixed viewpoint. We use Photometric Stereo to estimate the normal map and the unshaded image in preprocessing. Then, different texture points (texels) are recognized by their pixel values with neighborhood matching, using segmentation and labeling. Therefore, we can transfer the texture to another object and render it under different illumination conditions using these clustered texels.1 Introduction 1 1.1 Problemstatement . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2 1.2 System overview and thesis organization . . . . . . . . . . . . . . . . . . . . 3 2 Related work 5 2.1 BRDFs and BTFs . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5 2.2 Photometric stereo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 7 2.3 Texture synthesis over surfaces . . . . . . . . . . . . . . . . . . . . . . . . . . 7 3 Acquisition 9 3.1 Setup and acquisition . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 9 3.1.1 Light calibration . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 9 3.2 Photometric stereo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11 4 Photograph relighting 13 4.1 Texel clustering . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13 4.2 Shading maps . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 16 4.3 Relighting . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 20 5 Texture transfer 23 5.1 The approach . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 23 5.1.1 Image analogies . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24 5.1.2 Feature vectors . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 26 5.2 Rendering . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 28 6 Results 31 6.1 Synthetic objects . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 31 6.2 Real objects . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 31 6.3 Image-based lighting . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 34 7 Conclusion and future work 37 7.1 Conclusion . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 37 7.2 Future work . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 374865822 bytesapplication/pdfen-US電腦圖學影像處理紋理生成材質反射函數computer graphicsimage-based renderingtexture synthesisBTFthesishttp://ntur.lib.ntu.edu.tw/bitstream/246246/53708/1/ntu-95-R93922016-1.pdf