指導教授:徐百輝臺灣大學:土木工程學研究所黃姵綺Huang, Pei-ChiPei-ChiHuang2014-11-252018-07-092014-11-252018-07-092014http://ntur.lib.ntu.edu.tw//handle/246246/260826隨著電腦視覺及影像處理技術之發展,攝影測量共軛點的量測方式已由傳統的人工選點轉變為自動匹配,各種不同的影像匹配演算法也逐漸被提出。Lowe (2004)所提出的SIFT演算法與Bay et al. (2008)提出的SURF演算法即屬於特徵式匹配法,已被廣泛使用於電腦視覺及攝影測量領域中。由於SIFT與SURF在進行特徵點偵測時,皆必須進行大量的計算,並以經驗法則決定相關的門檻值,此外在特徵點偵測與描述元計算為兩個不同的計算步驟,因此運算效能上較為費時。小波轉換法是一種良好且具有完整數學理論的資料轉換方法,其所具有的多重解析度特性與SIFT找尋關鍵點所使用的高斯金字塔概念類似,但小波轉換具有較佳的極值點搜尋效能。過去研究中小波轉換大都用於影像中明顯的角點偵測或邊緣線偵測,本研究則希望建構一套以小波轉換為基礎之影像匹配法,希望能利用一次小波轉換後的數值完成影像匹配的步驟,發展出一套較有效率的方法。在本研究的實驗中分別以模擬影像以及實際影像進行測試與分析,於模擬影像中探討不同特徵點的特性,並於實際影像中檢驗研究流程中各步驟方法之適用性,並以最小二乘匹配法、相對方位解算成果以及核線幾何對應的方法進行成果評估,實驗成果顯示分別在四組影像相比下,除了LSM的評估成果本研究方法約為1個pixel上下而SIFT與SURF的精度小於1個pixel之外,在相對方位以及核線幾何的成果評估當中,本研究之匹配成果可優於SURF的方法,雖然無法優於SIFT的方法,但可達到與SIFT相近的精度。With the development of technology in both computer vision and image processing, a variety of image matching algorithms have been gradually proposed. The SIFT algorithm proposed by Lowe (2004) and the SURF algorithm proposed by Bay et al. (2008) belong to a kind of feature-based image matching and are widely used in both computer vision and photogrammetry field. In the stage of feature detection, no matter in SIFT or SURF, there is a great amount of calculation in finding extremes and the thresholds for keypoint localization are determined by experience. Besides, it is time-consuming when doing keypoint detection and producing keypoint descriptors in difference methods in both SIFT and SURF. Wavelet transform is one of the most popular analysis tools of the time-frequency transformation. The basic concept of wavelet multiresolution analysis is very similar to the Gaussian pyramid which is used in SIFT, but wavelet transform can detect the extreme points more accurately and has a better efficiency in searching extreme points. Generally, the wavelet transform is commonly used to detect the distinct features such as corners and edges. In this study, the wavelet transform is used to construct a feature-based image matching method for both detecting keypoints and calculating descriptors. In the experiment of this study, the proposed method is applied on both simulated images and a set of aerial images. The simulated image is used to investigate the characteristic of the keypoints in difference methods. And the aerial images are used to verify the performance of each step in the proposed method. The performance are illustrated comparing with the SIFT and SURF algorithm for least square matching (LSM), solving the relative orientation and epipolar geometry. The LSM results show that the error of conjugate point is about 1 pixel in our method and less then 1 pixel in both SIFT and SURF. But in the relative orientation and epipolar geometry result, our method performs better than SURF algorithm and is close to SIFT algorithm.口試委員會審定書 i 誌謝 ii 摘要 iii ABSTRACT iv 目錄 vi 圖目錄 ix 表目錄 xii 第一章、 緒論 1 1.1 研究背景 1 1.2 研究動機與目的 3 1.3 研究方法與流程 6 1.4 論文架構 7 第二章、 文獻回顧 8 2.1 特徵匹配演算法 8 2.2 小波轉換用於特徵偵測 16 2.3 小波轉換模數極大值 19 第三章、 研究方法 23 3.1 小波轉換 24 3.2 小波轉換之雜訊去除演算法 29 3.3 小波轉換模數極大值(WTMM) 31 3.4 特徵點的定位 36 3.5 特徵點內插至次像元 37 3.6 計算特徵點的主方向與描述元 40 3.6.1 主方向的建立 40 3.6.2 計算描述元 41 3.7 影像匹配與除錯 43 3.8 共軛點成果評估 44 3.8.1 最小二乘匹配法 44 3.8.1.1 方法介紹 44 3.8.1.2 本文的成果評估方式 46 3.8.2 相對方位解算模式 47 3.8.2.1 共面方程式 47 3.8.2.2 相對方位 49 3.8.3 核線幾何的驗證方式 51 第四章、 實驗及成果分析 53 4.1 實驗一:以模擬影像進行特徵點之比較 54 4.1.1 不同萃取方式之特徵點的特性與差異 54 4.1.2 不同特徵點偵測方式之奇異點偵測能力 58 4.2 實驗二:研究流程中各步驟的實驗 63 4.2.1 實驗影像介紹 63 4.2.2 不同小波基底函數之比較 64 4.2.3 雜訊去除方法之比較 67 4.2.3.1 實驗方法介紹 67 4.2.3.2 實驗成果 68 4.2.4 特徵點內插考量範圍之比較 72 4.2.5 與SIFT、SURF匹配成果比較 75 4.3 實驗三:其他航照影像測試 79 4.3.1 第一組UAS影像對測試 80 4.3.2 第二組UAS影像對測試 83 4.3.3 第三組UAS影像對測試 87 4.4 實驗四:特徵點內插的影響 91 第五章、 結論與建議 92 5.1 結論 92 5.2 未來工作 93 參考文獻 958667130 bytesapplication/pdf論文公開時間:2019/09/12論文使用權限:同意有償授權(權利金給回饋學校)影像匹配小波轉換小波轉換係數極值曲線點特徵偵測以小波轉換為基礎之影像匹配法Wavelet-Based Image Matching Methodthesishttp://ntur.lib.ntu.edu.tw/bitstream/246246/260826/1/ntu-103-R01521115-1.pdf