영상정합

왜 배우는가: 영상정합은 수치사진측량과 위성영상 처리에서 대응점을 자동으로 얻는 핵심 기술이다. 수작업 측정의 한계를 극복하는 방법으로 여러 회차에 걸쳐 반복 출제된 개념이므로, 정의와 원리, 방식 구분을 정확히 알아야 한다.

출제 이력: 제137회 1교시 12번, 제128회 1교시 3번, 제122회 4교시 4번, 제111회 4교시 1번, 제101회 1교시 6번, 제93회 2교시 3번

1. 한 줄 정의와 핵심 키워드

영상정합은 같은 지상점의 대응점을 찾아 영상을 맞추는 과정이다. 촬영 위치나 시기가 다른 둘 이상의 영상에서 동일한 대상을 나타내는 점 쌍을 자동으로 찾고, 그 결과로 영상 사이의 기하 관계를 결정하는 기술이다.

핵심 키워드는 다음과 같다.

• 대응점: 서로 다른 영상에서 같은 지상점을 나타내는 화소 위치의 쌍이다. 영상정합의 최종 산출물이다.
• 공액점: 사진측량에서 대응점과 같은 뜻으로 쓰이며, 두 사진에 나타난 같은 지상점의 상을 말한다.
• 상관계수: 두 영상 창(window)의 밝기 유사도를 수치로 나타낸 값이며, 영역기반 정합의 판단 기준이다.
• 에피폴라 기하: 한 영상의 점에 대응하는 점이 다른 영상의 한 직선 위에 놓인다는 기하 관계이다.
• 특징점: 모서리나 코너처럼 주변과 뚜렷이 구분되어 여러 영상에서 다시 나타나는 점이다.
• 시차: 두 영상에서 같은 점이 놓인 위치의 차이이며, 입체 모델과 높이 산출의 근거가 된다.
• 영역기반 정합: 화소의 밝기 값을 직접 비교해 대응점을 찾는 방식이다.
• 특징기반 정합: 특징점과 그 기술자(descriptor)를 비교해 대응점을 찾는 방식이다.

2. 개념 풀이

영상정합은 기하 관계가 다른 둘 이상의 영상에서 동일한 대상을 나타내는 화소 또는 특징을 찾아, 그 대응 관계를 수학적으로 결정하는 처리 과정이다. 대응 관계는 영상 좌표 사이의 변환으로 표현되며, 사진측량에서는 이를 이용해 입체 모델을 만들고 지상 좌표를 계산한다. 따라서 영상정합의 성패는 대응점이 얼마나 정확하고 많이 얻어지는가에 달려 있다.

원리의 출발점은 대응점 후보 주변의 밝기 패턴이 얼마나 비슷한지 평가하는 데 있다. 한쪽 영상의 작은 창을 다른 영상 위에서 옮겨 가며 유사도 척도인 상관계수를 계산하고, 그 값이 가장 큰 위치를 대응점으로 택한다. 탐색 범위를 무작정 넓히면 연산량과 오매칭이 함께 늘어나므로, 에피폴라 기하로 탐색 방향을 한 직선으로 제한하는 것이 일반적이다.

특징기반 정합은 먼저 각 영상에서 특징점을 추출하고, 점 주변의 밝기 변화를 기술자로 표현한 뒤 기술자 사이의 거리가 가장 가까운 짝을 찾는다. 조명, 회전, 축척이 달라져도 비교적 안정된 대응을 얻을 수 있어 촬영 조건이 다양한 영상에 쓰인다. 다만 특징점이 적은 균질한 지역에서는 대응점이 부족해지는 한계가 있다.

대응 쌍 중에는 잘못 짝지어진 것이 섞이기 마련이다. 이를 걸러내는 기하 검증 단계에서는 대응점들이 하나의 변환 모델을 따르는지 검사하고, 어긋난 쌍을 이상치 제거로 버린다. 정확도는 대응점의 위치 오차로 나타나며, 텍스처가 풍부하고 중복도가 충분할수록 높아진다. 반대로 물이나 눈처럼 특징이 없는 지역, 반복 패턴을 가진 건물 외벽에서는 오매칭이 늘어난다.

수치사진측량에서는 내부표정과 상호표정, 번들 조정에 필요한 연결점을 사람이 직접 찍는 대신 영상정합으로 자동 생성한다. 이 점이 영상정합을 사진측량 자동화의 기반 기술로 보는 이유이다.

3. 등장 배경과 필요성

영상정합 기술이 필요해진 배경은 공액점을 사람이 수작업으로 측정할 때의 시간과 비용 부담이다. 항공사진 한 블록에는 중복도를 두고 촬영한 많은 영상이 있고, 영상 쌍마다 여러 점을 측정해야 하므로 수작업은 대량 처리에서 현실적인 한계에 부딪힌다. 측정자의 숙련도에 따라 결과가 달라진다는 문제도 함께 있다.

디지털 영상이 보급되고 컴퓨터의 연산 능력이 높아지면서 밝기 값 기반의 자동 대응점 탐색이 실용화되었다. 아날로그 사진을 스캔해 쓰던 단계에서 시작해, 디지털 항공카메라와 무인항공기 촬영이 늘면서 대량의 영상을 자동으로 처리하려는 요구가 커졌다. 이에 따라 영상정합은 사진측량의 한 단계에서 전체 공정을 떠받치는 기술로 자리 잡았다.

정합 기술은 사진측량 외에도 위성영상 간 변화 탐지, 정사영상 제작, 3차원 모델 복원에서 공통으로 쓰인다. 공간정보 수요가 늘고 공간정보가 실시간 서비스로 확장되면서, 영상을 빠르고 정확하게 연결하는 기술의 중요성도 함께 커지고 있다. 시험 답안에서는 수작업의 한계와 자동화의 필요성을 두 문장으로 제시하면 배경 설명이 충분하다.

4. 구성요소·원리·절차

영상정합은 두 영상에서 같은 지상점이 찍힌 위치, 즉 대응점을 찾는 과정이다. 대응점이 정해지면 공선조건식으로 지상점의 공간좌표를 계산하므로, 영상정합의 정밀도는 수치도화와 수치표고모델(DEM) 생성 결과를 좌우한다.