색상 정보를 이용한 프로젝션 화면(projection display)상의 전경물체 검출(foreground object detection)은 조명 변화나 복잡한 배경 때문에 어렵다고 알려져 있다. 본 논문에서는 프로젝터의 입력 영상과 프로젝션 화면을 촬영한 카메라 영상들로부터 얻어진 색상 정보를 이용한 전경물체 검출 방법을 제안한다. 두 영상사이에 기하 왜곡과 색상 왜곡이 존재한다고 가정한다. 두 영상사이의 관련된 화소를 찾기 위해 투영변환방법(projective transformation)을 사용하여 기하 왜곡을 보정한다. 프로젝션화면상에 전경물체가 없을 때 관련된 화소사이의 색상 차이를 프로젝션 화면상의 자연스러운 왜곡으로 모델링한다. 이를 다항식 근사 방법(polynomial fitting)으로 모델링한다. 영상 내 어떤 위치에서 관련된 화소 사이의 차이가 주어진 다항식에서 예측된 색상차이보다 클 때 전경물체가 있는 것으로 간주한다. 실험 및 결과에서 제안된 전경물체 검출 방법이 디지털 데스크(DigitalDesk)같은 프로젝션 화면 시스템에 적용 가능하다는 것을 보였다.
The detection of foreground objects in a projection display using color information can be hard due to changing lighting conditions and complex backgrounds. Accordingly, the current paper proposes a foreground object detection method using color information that is obtained from the input image to the Projector and an image captured by a camera above the projection display. After pixel correspondences between the two images are found by calibrating the geometry distortion and color distortion, the natural color variations are estimated for the projection display. Then, any pixel that has another variation not resulting from natural geometry or color distortion is considered a part of foreground objects, because a foreground object in a projection display changes the values of pixels. As shown by experimental results, the proposed foreground detection method is applicable to an interactive projection display system such as the DigitalDesk
