대부분의 게임 인터페이스는 명시적입니다. 플레이어가 키를 누르거나, 스틱을 움직이거나, 화면을 터치하면 소프트웨어는 정해진 형식의 명령을 받습니다. 컴퓨터 비전은 전혀 다른 종류의 인터페이스를 가능하게 합니다. 게임이 카메라로 현실 세계를 관찰하고, 보이는 것을 해석할 수 있게 되는 것입니다.
이는 게임 하드웨어에 흥미로운 가능성을 열어 줍니다.
영상 촬영에서 게임 상태로
카메라만으로는 아무것도 이해할 수 없습니다. 컴퓨터 비전 시스템은 프레임을 분석해 사물, 위치, 움직임, 숫자, 패턴을 식별합니다. 게임에서는 이렇게 관찰한 내용을 게임 상태로 바꿀 수 있습니다.
예를 들어 실물 주사위의 결과를 인식하고, 미니어처의 위치를 추적하고, 어떤 물건이 움직였는지 감지하고, 플레이 면의 어느 곳에서 활동이 일어나는지 파악할 수 있습니다.
어려운 부분은 신뢰성입니다. 조명이 바뀌고, 손이 물건을 가리고, 말들이 서로 비슷해 보이고, 카메라는 완벽하지 않은 각도에서 테이블을 봅니다. 그래서 쓸 만한 제품이 되려면 비전 모델에 보정, 신뢰도 기준값, 게임에 맞춘 로직을 함께 결합해야 합니다.
테이블탑 게임이 흥미로운 활용 사례인 이유
테이블탑 플레이어는 이미 의미 있는 실물 사물을 다루고 있습니다. 주사위는 불확실성을 나타냅니다. 미니어처는 캐릭터와 위치를 나타냅니다. 컴퓨터 비전은 플레이어에게 이런 사물을 가상의 대체물로 바꾸라고 강요하지 않고도 디지털 시스템과 연결할 수 있습니다.
Realm Kinetics는 이러한 실물과 디지털을 잇는 인터페이스의 일부로, 카메라를 내장한 Doungim을 개발하고 있습니다. 이 콘솔은 진짜 주사위와 미니어처를 그대로 쓰면서 소프트웨어가 디지털 레이어를 관리하도록 설계되었습니다.
이렇게 컴퓨터 비전은 게임 인터페이스를 조용히 바꿀 수 있습니다. 플레이어가 컨트롤러로 컴퓨터에 모든 것을 알려 주는 대신, 시스템이 플레이어가 이미 하고 있는 일의 일부를 스스로 이해하기 시작하는 것입니다.