본 논문에서는 관객의 신체 제스처 인식을 기반으로 시각적, 언어적 활자 표현이 가능한 인터랙티브 타이포그래피에 대하여 연구하였다. 현재까지 등장해온 새로운 미디어의 영향으로 타이포그래피의 표현 영역도 넓어졌으며 ‘상호작용’, 즉 ‘인터랙션’의 개념이 더해지면서 타이포그래피 표현 영역의 확장은 계속 이루어지고 있다. 그러나 현재까지 존재하는 많은 인터랙티브 타이포그래피 작품은 글자의 움직임과 같은 시각화된 표현만 중시한 채, 관객과 상호작용하는 개념이 배제되었다. 이러한 이유로 관객과의 상호작용을 중시하는 인터랙티브 타이포그래피에 대한 작품을 제안하도록 한다. 본 논문을 위해 구현한 작품은 관람객 제스처에 따라 작품이 완성되는 실시간 인터랙티브 타이포그래피 작업으로 평소 인간이 글자를 입력하기 위해 사용하는 키보드나 모바일 기기를 벗어나 관객의 신체 포즈가 인터페이스가 되는 방식을 적용하고 있다. 시스템 구현을 위한 방법론적 연구로서는 실시간 데이터 처리 과정을 걸쳐 관객의 신체 제스처를 문자로 인식하는 알고리즘을 연구하고, 이를 통해 시각 이미지를 표현하였다. 이러한 과정을 통하여 신체 제스처를 데이터화하고 시각 매체와의 상호작용을 위한 수단으로 사용하는 방법을 제시하고자 한다.
본 연구에서는 관객의 신체 제스처 인식을 기반으로하여 시각적, 언어적 활자 표현이 가능한 인터랙티브 타이포그래피에 대해 연구했다.