ソニーPCLの最先端技術を体験するイベント『Creative Summit 2024』が8月1日、2日にかけて開催された。

　ソニーPCLは、先端技術を活用し映像制作や体験型コンテンツにおけるクリエイティブワークの最前線を開拓するチームだ。今回のイベントでは2D、3D、そしてイマーシブ＝没入型コンテンツ制作の新たな手法や、制作事例が紹介された。

　本イベントは、こうした最先端ツールを使うクリエイターとともに議論を重ねることを目指す意味で 「Summit」と名付けられた。どのような議論が巻き起こったのか、その点も興味深いところだが、本稿では展示された技術を中心に取り上げていこう。

6面ディスプレイでDJ松永のスクラッチを体感

　会場の中心にはグラデーションが鮮やかな巨大な円柱が建てられている。スリット部分から中に入ると、今回のイベントの目玉となるイマーシブコンテンツを体験する空間が広がる。

　内部はソニーの『Crystal LED VERONA』を使用した3m角（1920×1920pixel）の大型ディスプレイ6枚に囲まれた空間となっている。Crystal LED VERONAは、バーチャルプロダクションなどに用いられるディスプレイだ。高リフレッシュレート、低反射、高輝度、広色域といったスペックによって、映画撮影時などに、3DCGや映像を映し出すことでリアルな背景として機能する。

　メインコンテンツである「DJ Matsunaga Routines」が映し出されると、大音量かつ高精細な音ととともに、巨大ディスプレイの中でCreepy NutsのDJ松永によるキレキレのターンテーブルプレイが炸裂する。

　使用されているのは、ステレオの音源を「音源分離技術」によって12.1chの空間立体音響へと再編集したもの。まるで空間そのもののが鳴っているかのような感覚に陥る。

　“没入体験”としては映像と音だけでもすでに十分なレベルだが、これだけではない。空間内を歩き回っていると、音に合わせて足元から振動が伝わってくることがわかる。床面に「アクティブスレート（Active Slate）」というハプティクスパネルを敷き詰めている。これによって地面からの音鳴り、振動が伝わり、よりライブ感を感じられる仕組みだ。もともとの音量自体もかなり大きなものだったが、このアクティブスレートがあることで、まるで巨大なサウンドシステムの眼の前に立ち、全身で音を浴びるような体験となった。

　アクティブスレートが再現するのは音圧を始めとする迫力だけではない。ソニーPCLがバーチャルプロダクションを使用して制作したショートムービー『リテイク』で使用された背景が映し出されると舞台は宇宙空間へ。やがて場面が月面へ移り変わる。すると、足元の感触がにわかに変化する。月面の砂であるレゴリスを踏みしめる感覚、なじみ深いところでいえば、冬の朝の霜が降りた地面、あるいは薄氷を踏むような小気味よい感触が足元から伝わってくる。ここまでくると、没入というよりも、どこか遠くの世界に来てしまったような気さえしてくる。

　このイマーシブ空間は、今後プロモーションやIPを活用したコンテンツへの展開が期待されている。Crystal LED VERONAやアクティブスレートは可搬性にも優れているため、さまざまな場所で体験を提供できるということだ。

押井守『天使のたまご』の音声リマスタリングにも活用

　「2Dコンテンツ」ゾーンを一部紹介しよう。

　「360°カメラカー」は、ソニー製のデジタルシネマカメラ『VENICE2』を2台搭載した撮影用自動車だ。360°の撮影を可能としながら、実際に公道を走れるように設計されているため、ドライブシーンの撮影などに用いられている。

　ここではソニーPCLが運営する「清澄白河BASE」にあるバーチャルプロダクションスタジオの機能の一部を外に持ち運べるようにパッケージした、可搬型のバーチャルプロダクションサービスも展示された。『Crystal LED VERONA』の前にカメラをセットし、床面のマーカーなどを使ってカメラの位置情報を取得することで、カメラワークに合わせ、様々な角度から背景映像を映し出せるというものだ。

　ほかにも、本来複数のスピーカーで行う立体音響技術をヘッドホン内に再現する360Virtual Mixing Environment」や、「DJ Matsunaga Routines」でも活用された「音源分離技術」などの音響技術なども展示。ここでは1985年の押井守監督作品『天使のたまご』に音源分離技術を使用してセリフの音声を抜き出し、リマスター処理を行うデモが体験できた。