インタラクティブ・プロジェクション・マッピング：5つのプロジェクト
はじめに - インタラクティブ・アートと没入体験プロジェクションマッピング
インタラクティブアートは、環境に反応するダイナミックな芸術形態である。こうして制作された作品は、人間や自然などの環境と、それを構成する他の要素との間につながりを生み出す。これらの要素は、舞台、セット、彫刻、光、コンピューターシステム......インタラクティブ・インスタレーションでは、参加者がセンサーを通して相互作用し、ライブで生成されるユニークな結果を生み出す。
製作例 : Daniel Rozin - Mechanical Mirrors
ビデオプロジェクターによるプロジェクションマッピングは、空間を光で彩ることができる。そのため、環境で起こる出来事を視覚的に転写するのに適している。例えば、人の動き、ボタンの操作、楽器が奏でる音などです。この記事では、インタラクティブなプロジェクション・マッピング・プロジェクトを紹介し、没入型体験の可能性を示す。
プロジェクションマッピングとは？
ビデオマッピングや空間拡張現実とも呼ばれるプロジェクションマッピングは、デジタルコンテンツを投影することで、通常の表面をダイナミックなディスプレイに変える最先端技術です。この革新的な技術は、没入感のある魅力的な体験を生み出すことができるため、マーケティング、エンターテインメント、教育など、さまざまな分野で大きな人気を集めています。ビデオプロジェクターを使用することで、プロジェクションマッピングは、ブランドメッセージを伝えたり、ユニークなステージ背景を作成したり、壁や天井を装飾したり、力強い感情を呼び起こしたりすることができます。この技術の多用途性により、ユーザーはどのような表面も素晴らしいビジュアルストーリーテリングのためのキャンバスに変えることができ、アーティストやマーケティング担当者にとってもお気に入りのツールとなっている。
プロジェクションマッピングの歴史と発展
プロジェクションマッピングのコンセプトは、ディズニーがディズニーランドで初めてこの技術を導入した1969年まで遡る魅力的な歴史を持っている。プロジェクション・マッピングが最初に使われたのは「お化け屋敷」のライドで、マネキンの頭部に顔を投影し、不気味でリアルな効果を生み出した。当時から、このテクノロジーは劇的に進化し、当初をはるかにしのぐ壮大なビジュアルを提供している。今日、現代のプロジェクションマッピングは、没入型体験を作り出すための人気のツールであり、その応用範囲は広告、教育、エンターテインメントなど様々な業界に広がっている。プロジェクションマッピング技術の進歩により、非常に詳細でインタラクティブなディスプレイを制作することが可能になり、観客を魅了し、普通の空間を特別な環境に変えることができるようになりました。
ジェシー・ジェームズ・アレンによる2つのインタラクティブ・プロジェクション・マッピング・プロジェクト
ジェシー・ジェームス・アレンは、デジタル時代の幕開けとなった90年代初頭、エンターテインメント業界でサウンドエンジニアとしてのキャリアをスタートさせた。次第にテーマパークのメディア・デザイナーとなり、多くのツールを使いこなすことを学んだが、それらはすべて、ストーリーテリングを通じて感動的な体験を提供するために不可欠なパズルのピースだと考えている。彼は53のビデオゲームのデザインに参加し、この活動が彼のクリエイティブとしてのキャリアを形成してきた。ビデオゲームの影響は、彼のプロジェクション・マッピング・プロジェクトのいくつかで感じることができ、プロジェクションをコントロールするためにビデオゲームのコントローラーを使うこともある。
ジェシーは、より説得力のあるセンセーショナルなストーリーを伝えるためのインタラクティブな体験や展示において、HeavyMに大きな可能性を見出している。実際、彼は画家やイラストレーターと仕事をしている。物理的な触覚の世界を方程式に取り入れることで、より生き生きとした、より有機的な効果が得られるからだ。ジェシーによれば、「伝統的なアートとデジタルのミックスは、特別なマジックを生み出す。HeavyMの研究開発を始めて約1年になりますが、可能性の全宇宙に触れ、表面を擦っただけだと感じています」。
チャーリー・ジッチャとのコラボレーションにより、導電性インクを使ったペインティングが完成した。このインクはタッチボードに接続され、タッチボードが情報をHeavyM用のMIDIに変換する。HeavyMのシーケンサーはMIDI制御が可能なので、ジェシーは絵画の一部を特定のシーケンスにリンクさせた。プロジェクションマッピングでオブジェクトを効果的にアニメーションさせるには、アニメーションさせる面の形状に合わせたマスクを作成することが不可欠だ。
この経験に基づき、ジェシー・ジェームス・アレンは、クリエイティブ・シティ・プロジェクトがオーランドで主催した巨大な芸術祭「Immerse in 2017」で紹介された8フィートの彫刻「セラフ・エンジェル」を構想し、製作した。
セラフ』は、プロジェクションマッピング、モーションキャプチャー、サウンドデザインを組み合わせ、没入型のインタラクティブ体験を提供する。これはジェシーにとって、HeavyMを使ったこれまでで最大のプロジェクトであり、すべての観客に、自分の身体や声を通してインスタレーションと対話する機会を提供する。ジェシーはこのプロジェクトでHeavyM Liveのパワーをフル活用した。
投影されるビジュアルの大部分はシェーダーで、リープモーションによる動き認識と導電性インクによるタッチインタラクションによって、来場者がコントロールできる。最後に、HeavyMの音解析モジュールは、マイクを介して来場者の声に反応するために使用された。
モーショントラッキングによるインタラクティブなプロジェクションマッピング
Digital Essenceは2014年以来、企業コミュニケーションのためのインタラクティブ・インスタレーションを制作している。同社は、空間デザイナー、CGデザイナー、エンジニアのコラボレーションにより、ビデオ・プロジェクションを使ったインタラクティブ・システムを設計・実装している。デジタル・イノベーションに特化したイベント「Hacking de l'Hôtel de Ville de Paris 2020」のために、Digital Essenceはインタラクティブなプロジェクション・マッピング・インスタレーションをデザイン・制作した。
主な目的は、イベントを盛り上げるデジタル・アニメーションを提案しながら、ユニークな場所を強調することである。そのため、プロジェクション・マッピングのおかげで、大階段の階段は、ビデオ・アニメーションをトリガーすることによって、一般の人々の通行に反応する。このインスタレーションは、来場者に没入感とインパクトのある体験を与え、記憶に残ることだろう。複数のプロジェクターが使用され、視聴者のエンゲージメントを高める高品質なプロジェクションが実現した。
Digital Essenceは、ZEDの立体視カメラと組み合わせた。 オーグメンタ・トラッキング・ソフトウェア 階段上の人の存在と位置を検出する。エッジブレンディングは、投影面全体の画質とシームレス性を高めるために採用された。
このデータはシェーダーに送られ、HeavyMで表示と変形が行われ、人が通ると階段のオン／オフが行われる。最後に、検出フィールドに人がいるとすぐに「キラキラの雨」のビデオが再生される。
このプロジェクトの詳細 ブログ記事へのリンク
プロジェクションマッピングでインタラクティブディスプレイをパーソナライズ
もうひとつのDigital Essenceプロジェクト：タブレットで選択した内容に基づいてパーソナライズされた体験を提供する没入型ボックス。一連の質問に答えると、訪問者は周囲に投影された箱の中に入り込む。体験は色、音楽、目的地の選択によってカスタマイズできる。アニメーションや音楽は回答に応じて変化し、インパクトのある体験を保証する。さらに、バーチャルラグビーやバーチャルサッカーのようなインタラクティブなゲームを組み込むことで、投影されたコンテンツとのリアルタイムのインタラクションを通じて、エンゲージメントを高めることができる。
技術的な部分では、2台のオルガ・キット、3台のフルHD超短焦点プロジェクター、コンピューター、タブレットを使用している。ブースに入る前に、来場者はタブレットに表示されたウェブページのフォームに入力する。その回答はデータベースに入力され、ショーを中継するコンピューター上で動作するプログラムによって処理される。最後に、このプログラムはOSCメッセージによってHeavyMが表示するビデオを制御する。また、この技術により、壁をインタラクティブ・ディスプレイに変えることができ、様々な投影方法やインタラクティブ・ゲームを使って、カスタマイズ可能な表面に没入体験を作り出すことができる。
ステージにインタラクティブなプロジェクションマッピング
インタラクティブなプロジェクション・マッピング・プロジェクトのセレクションの最後を飾るにふさわしいのは、舞台芸術への応用である。ディオメディ・マッティアは、ダンスとビデオプロジェクションをリンクさせたこのパフォーマンスのために、ダンサーの動きに基づいたリアルタイムの画像生成システムを導入した。投影面は、ダイナミックなビジュアルを実現する上で重要な役割を果たし、舞台を没入体験へと変貌させる。
このインタラクティブ・バレエは、Blacktrax技術とTouchDesignerを使用してLaserentertainmentによって制作されました。Blacktraxは、赤外線LEDを利用したモーション・トラッキング技術である。ダンサーには、バッテリーとLEDからなる小さな電子回路が搭載されており、その光は人間の目には見えないが、特定のカメラには見えない。そして、画像処理ソフトウェアによってダンサーの位置を知ることができ、TouchDesignerソフトウェアに送られる。この技術のユニークな特徴は、パフォーマンス全体の質と効果を高める。
TouchDesignerを使用すると、互いにリンクするノードのシステムを通じて画像ジェネレータをプログラムできます。
プロジェクション・マッピング・プロジェクトの未来
プロジェクション・マッピング・プロジェクトの未来は非常に有望で、インタラクティブ性が次の大きな展開になると考えられている。近い将来、特殊なメガネを使ったバーチャルリアリティ（VR）のような体験ができるようになり、ユーザーは投影された映像にさらに没入できるようになるかもしれない。視聴者が音、タッチ、視覚を通じてマッピングにリアルタイムで影響を与えることを可能にする技術はすでに波及しており、インタラクティブな体験を高めている。ウェアラブル技術もまた、よりパーソナライズされた魅力的なインタラクションを提供するために統合されつつある。しかし、このような高度なディスプレイの制作には、コストや制作時間などの課題がある。製造プロセスには、さまざまな部門間の協力や多額の投資が必要になることが多い。これらの障害を克服するには、継続的な革新と投資が必要だが、真に没入できる体験を生み出すという点で、潜在的な報酬は計り知れない。
結論
このインタラクティブ・プロジェクションマッピング・プロジェクトのセレクションは、その用途と可能性を垣間見ることができ、没入感を生み出す可能性を示している。これらは実に幅広く、今後ますます発展していくだろう。テクノロジーは、インタラクションを可能にするセンサーシステムの不可欠な一部であるため、インタラクティブアートにおいて不可欠な役割を果たしている。従って、コンピュータ・ツールを利用しやすくすることは、この分野の作品の成長と増殖に不可欠である。HeavyMは、その使いやすさと多様性により、数クリックでインタラクティブなプロジェクションマッピングを実現することができる。
JA 
EN 
FR 
ES 
DE 
IT 
PT 
CN 
KR 
RU