인터랙티브 프로젝션 매핑: 발견해야 할 5가지 프로젝트
소개 - 인터랙티브 아트 및 몰입형 경험 프로젝션 매핑
인터랙티브 아트는 환경에 반응하는 역동적인 예술 형식입니다. 이렇게 제작된 작품은 인간이나 자연과 같은 환경과 이를 구성하는 다른 요소 사이에 연결고리를 만들어냅니다. 이러한 요소는 무대, 세트, 조각품, 조명, 컴퓨터 시스템 등이 될 수 있으며 인터랙티브 설치 작품에서 참가자는 센서를 통해 상호작용하여 실시간으로 생성되는 독특한 결과물을 만들어냅니다.
예시: 다니엘 로진 - 기계식 거울
비디오 프로젝터 덕분에 프로젝션 매핑을 사용하면 빛으로 공간을 장식할 수 있습니다. 따라서 환경에서 발생하는 이벤트를 시각적으로 기록하는 데 흥미롭습니다. 이러한 이벤트는 예를 들어 사람의 움직임, 버튼의 동작 또는 악기가 연주하는 소리 등이 될 수 있습니다. 이 글에서는 인터랙티브 프로젝션 매핑 프로젝트로 몰입형 경험을 만들 수 있는 가능성을 보여드리기 위해 다양한 인터랙티브 프로젝션 매핑 프로젝트를 소개합니다.
프로젝션 매핑이란 무엇인가요?
비디오 매핑 또는 공간 증강 현실이라고도 하는 프로젝션 매핑은 디지털 콘텐츠를 투사하여 일반 표면을 역동적인 디스플레이로 변환하는 최첨단 기술입니다. 이 혁신적인 기술은 몰입감 있고 매력적인 경험을 만들어내는 능력으로 인해 마케팅, 엔터테인먼트, 교육 등 다양한 분야에서 큰 인기를 얻고 있습니다. 프로젝션 매핑은 비디오 프로젝터를 사용하여 브랜드 메시지를 전달하고, 독특한 무대 배경을 만들고, 벽과 천장을 장식하고, 강력한 감정을 불러일으킬 수 있습니다. 이 기술의 다재다능함 덕분에 사용자는 어떤 표면이든 멋진 시각적 스토리텔링을 위한 캔버스로 바꿀 수 있어 아티스트와 마케터 모두에게 사랑받는 도구입니다.
프로젝션 매핑의 역사와 발전
프로젝션 매핑의 개념은 디즈니가 디즈니랜드에서 이 기술을 처음 도입한 1969년으로 거슬러 올라가는 흥미로운 역사를 가지고 있습니다. 프로젝션 매핑이 처음 사용된 것은 마네킹 머리에 얼굴을 투사하여 으스스하고 실감나는 효과를 연출하는 '유령의 저택' 놀이기구였습니다. 초창기 이후 이 기술은 극적으로 발전하여 초창기의 초라한 모습을 훨씬 뛰어넘는 화려한 비주얼을 선보이고 있습니다. 오늘날 프로젝션 매핑은 광고, 교육, 엔터테인먼트 등 다양한 산업으로 응용 분야가 확장되면서 몰입감 넘치는 경험을 제작하는 데 널리 사용되는 도구입니다. 프로젝션 매핑 기술의 발전으로 매우 섬세하고 인터랙티브한 디스플레이를 제작할 수 있게 되어 관객의 마음을 사로잡고 평범한 공간을 특별한 환경으로 탈바꿈시킬 수 있게 되었습니다.
제시 제임스 앨런의 인터랙티브 프로젝션 매핑 프로젝트 2건
제시 제임스 앨런은 디지털 시대가 태동하던 90년대 초 엔터테인먼트 업계에서 사운드 엔지니어로 경력을 쌓기 시작했습니다. 그는 점차 테마파크의 미디어 디자이너가 되어 스토리텔링을 통해 감성적인 경험을 전달하는 데 필수적인 퍼즐 조각으로 여겨지는 다양한 도구를 다루는 법을 배웠습니다. 그는 53개의 비디오 게임 디자인에 참여했으며, 이러한 활동은 크리에이티브로서 그의 커리어를 진정으로 형성했습니다. 비디오 게임의 영향은 그의 프로젝션 매핑 프로젝트 중 일부에서 느낄 수 있는데, 그는 때때로 비디오 게임 컨트롤러를 사용하여 프로젝션을 제어합니다.
제시는 인터랙티브 체험과 전시에서 HeavyM가 더욱 매력적이고 감각적인 이야기를 전달할 수 있는 잠재력이 크다고 생각합니다. 실제로 그는 화가 및 일러스트레이터와 함께 작업하면서 실제 촉각 세계를 도입하면 더욱 생생하고 유기적인 효과를 낼 수 있다고 생각합니다. "전통적인 예술과 디지털의 결합은 특별한 마법을 만들어냅니다. 약 1년 동안 HeavyM를 연구하고 개발해왔는데, 이제 겨우 표면을 긁어모으며 가능성의 우주를 만지고 있는 느낌입니다."라고 말합니다.
찰리 지차와의 협업으로 전도성 잉크로 만든 그림이 탄생했습니다. 이 잉크는 터치 보드에 연결되어 정보를 HeavyM용 MIDI로 변환합니다. HeavyM의 시퀀서는 미디 제어가 가능하기 때문에 Jesse는 그림의 일부를 특정 시퀀스에 연결했습니다. 프로젝션 매핑에서 오브젝트를 효과적으로 애니메이션하려면 애니메이션 대상 표면의 모양과 일치하는 마스크를 만드는 것이 필수적입니다.
이러한 경험을 바탕으로 제시 제임스 앨런은 2017년 크리에이티브 시티 프로젝트가 올랜도에서 주최한 대규모 예술 축제인 Immerse에서 선보인 8피트 높이의 조형물인 세라프 엔젤을 구상하고 제작했습니다.
세라프는 프로젝션 매핑, 모션 캡처, 사운드 디자인을 결합하여 몰입감 넘치는 인터랙티브 경험을 선사합니다. 이 프로젝트는 제시가 HeavyM로 제작한 가장 큰 규모의 프로젝트로, 모든 시청자가 몸과 목소리를 통해 설치물과 상호작용할 수 있는 기회를 제공합니다. 제시는 이 프로젝트에서 HeavyM Live의 모든 기능을 활용했습니다.
투사된 비주얼의 대부분은 셰이더로, 방문객이 도약 모션을 통한 동작 인식과 전도성 잉크와의 터치 상호작용을 통해 제어할 수 있습니다. 마지막으로 HeavyM의 사운드 분석 모듈은 마이크를 통해 방문객의 목소리에 반응하는 데 사용되었습니다.
모션 트래킹을 통한 인터랙티브 프로젝션 매핑
Digital Essence는 2014년부터 기업 커뮤니케이션을 위한 인터랙티브 설치물을 제작하고 있습니다. 이 회사는 시노그래퍼, 컴퓨터 그래픽 디자이너, 엔지니어 간의 협업을 통해 비디오 프로젝션을 사용한 인터랙티브 시스템을 설계하고 구현합니다. 디지털 혁신에 전념하는 행사인 해킹 드 빌 드 파리 2020에서 Digital Essence는 인터랙티브 프로젝션 매핑 설치물을 디자인하고 제작했습니다.
주요 목표는 이벤트를 강화하는 디지털 애니메이션을 제안하면서 독특한 장소를 강조하는 것입니다. 따라서 프로젝션 매핑 덕분에 메인 계단의 계단은 비디오 애니메이션을 트리거하여 대중의 통행에 반응합니다. 이 설치물은 방문객들에게 기억에 남을 몰입감 있고 인상적인 경험을 선사합니다. 여러 대의 프로젝터를 사용하여 시청자의 몰입도를 높이는 고품질 프로젝션을 구현했습니다.
Digital Essence는 ZED 스테레오 카메라와 결합된 어그멘타 추적 소프트웨어 를 사용하여 계단에 있는 사람의 존재와 위치를 감지합니다. 엣지 블렌딩을 사용하여 투사된 표면의 이미지 품질과 매끄러움을 향상시켰습니다.
이 데이터는 셰이더로 전송되어 사람이 지나갈 때 계단을 켜고 끌 수 있도록 HeavyM로 표시되고 변형됩니다. 마지막으로 감지 필드에 사람이 있는 즉시 "반짝이 비" 비디오가 재생됩니다.
이 프로젝트에 대한 자세한 정보: 블로그 글에 대한 링크를 클릭합니다.
프로젝션 매핑으로 대화형 디스플레이 개인화하기
또 다른 Digital Essence 프로젝트: 태블릿에서 선택한 내용에 따라 개인화된 경험을 제공하는 몰입형 박스입니다. 일련의 질문에 따라 방문객은 주변에 프로젝션이 있는 상자 안에 몰입하게 됩니다. 색상, 음악, 목적지 선택에 따라 경험을 맞춤 설정할 수 있습니다. 답변에 따라 애니메이션과 음악이 달라져 임팩트 있는 경험을 보장합니다. 또한 가상 럭비 및 가상 축구와 같은 인터랙티브 게임을 통합하여 영사된 콘텐츠와의 실시간 상호 작용을 통해 참여도를 높일 수 있습니다.
기술적인 부분에서는 올가 키트 2개, 풀 HD 초단초점 프로젝터 3대, 컴퓨터와 태블릿을 사용합니다. 부스에 들어가기 전에 방문객은 태블릿에 표시된 웹 페이지에서 양식을 작성합니다. 그런 다음 답변은 데이터베이스에 입력되고 쇼를 방송하는 컴퓨터에서 실행되는 프로그램에 의해 처리됩니다. 마지막으로 이 프로그램은 OSC 메시지를 통해 HeavyM가 표시하는 영상을 제어합니다. 이 기술은 또한 벽을 대화형 디스플레이로 변환하여 다양한 프로젝션 방법과 대화형 게임을 사용하여 사용자 정의 가능한 표면에서 몰입형 경험을 만들 수 있습니다.
무대에서의 인터랙티브 프로젝션 매핑
이번 인터랙티브 프로젝션 매핑 프로젝트의 마지막을 장식하기 위해, 저희는 이 기술의 적용 사례를 보여드리기로 결정했습니다. 무용과 비디오 프로젝션을 결합한 이 공연을 위해 디오메디 마티아는 무용수들의 움직임을 기반으로 실시간 이미지 생성 시스템을 구현했습니다. 프로젝션 표면은 역동적인 비주얼을 구현하는 데 중요한 역할을 하며 무대를 몰입감 넘치는 경험으로 변화시킵니다.
이 인터랙티브 발레는 레이저엔터테인먼트에서 블랙트랙 기술과 터치디자이너를 사용하여 제작했습니다. 블랙트랙스는 적외선 LED를 사용하는 모션 트래킹 기술입니다. 무용수들은 배터리와 LED로 구성된 소형 전자 회로를 장착하고 있는데, 이 회로의 빛은 사람의 눈에는 보이지 않지만 특정 카메라에는 보이지 않습니다. 그러면 이미지 처리 소프트웨어를 통해 댄서들의 위치를 파악할 수 있으며, 이는 TouchDesigner 소프트웨어로 전송됩니다. 이 기술의 독특한 기능은 공연의 전반적인 품질과 효과를 향상시킵니다.
터치디자이너를 사용하면 노드 시스템을 통해 이미지 생성기를 프로그래밍하여 서로 연결할 수 있습니다.
프로젝션 매핑 프로젝트의 미래
프로젝션 매핑 프로젝트의 미래는 매우 유망하며, 인터랙티브 기능이 다음 주요 개발 분야가 될 것입니다. 가까운 미래에는 특수 안경을 사용하여 가상현실(VR)과 유사한 경험을 할 수 있게 되어 사용자가 투사된 영상에 더욱 몰입할 수 있게 될 것입니다. 시청자가 소리, 촉각, 시각을 통해 실시간으로 매핑에 영향을 줄 수 있는 기술은 이미 큰 반향을 일으키며 인터랙티브 경험을 향상시키고 있습니다. 웨어러블 기술 또한 더욱 개인화되고 매력적인 상호작용을 제공하기 위해 통합되고 있습니다. 하지만 이러한 정교한 디스플레이를 제작하는 데 드는 비용과 제작 시간 등 해결해야 할 과제가 있습니다. 제작 과정에는 여러 부서 간의 협업과 상당한 투자가 필요한 경우가 많습니다. 이러한 장애물을 극복하려면 지속적인 혁신과 투자가 필요하지만, 진정한 몰입형 경험을 제작할 수 있다는 점에서 잠재적인 보상은 엄청납니다.
결론
이 인터랙티브 프로젝션 매핑 프로젝트는 몰입형 경험을 만들 수 있는 잠재력을 보여주는 응용 분야와 가능성을 엿볼 수 있습니다. 실제로 이 분야는 매우 광범위하며 앞으로 점점 더 발전할 것입니다. 기술은 상호작용을 가능하게 하는 센서 시스템의 필수적인 부분이기 때문에 인터랙티브 아트에서 필수적인 역할을 합니다. 따라서 컴퓨터 도구의 접근성은 이 분야에서 작품의 성장과 확산을 위해 필수적입니다. HeavyM는 사용이 간편하고 다양한 기능을 갖추고 있어 클릭 몇 번으로 인터랙티브 프로젝션 매핑을 구현할 수 있습니다.
KR 
EN 
FR 
ES 
DE 
IT 
PT 
CN 
JA 
RU