본 논문은 스테레오 동영상에서 깊이 정보와 움직임 정보를 이용하여 좌영상과 우영상이 바뀐 것을 검출하는 기법을 제안한다. 스테레오 정합 기법을 통해 깊이 정보를 얻어 영상을 전경과 배경 영역으로 나누고 움직임 추정 기법을 이용해 움직임 벡터를 얻는다. 제안 기법은 전경이 인접한 배경 쪽으로 움직이거나 배경이 인접한 전경 쪽으로 움직였을 때 가려짐이 발생하는 영역이 배경이라는 것을 이용한다. 그러나 좌영상과 우영상이 바뀐 경우에는 깊이 정보가 반대로 얻어져 전경과 배경 영역도 반대로 얻어지므로 위와 같은 움직임이 있을 경우에 가려짐이 발생하는 영역은 전경이다. 따라서 좌영상과 우영상이 바뀐 것을 검출할 수 있다. 모의실험을 통해 제안 기법이 전경에 의해 배경 영역이 충분히 가려지는 경우 높은 검출률을 보임을 알 수 있다.
This paper proposes detection of view reversal in a stereo video using depth map and motion vector information. We obtain a depth map by using a stereo matching and divide the input image into foreground and background. Next, we obtain a motion vector field by using a motion estimation. In general, an occluded region is in background when foreground goes toward the adjacent background or the background goes toward the adjacent foreground. But, we will face with the change of foreground and background because their depths also change when view reversal occurs. Therefore, we can detect the view reversal in stereo videos by using the observation that the foreground goes toward the adjacent background or the background goes toward the adjacent foreground. The experimental results show that the proposed algorithm achieves good detection rate when the background region is sufficiently occluded by the moving foreground.
