ソニーは、空間コンテンツ制作の支援を行うソリューション群「XYN（ジン）」において、空間キャプチャーソリューションを法人向けに提供する。日本では4月18日より開始し、米国へも順次展開する。
空間キャプチャーソリューションは、高品質な3DCGアセットを生成し、空間コンテンツとして活用するワークフローをサポート。今回提供を開始するソフトウェアツールは、空間コンテンツのための撮影を支援するスマートフォンアプリケーション『XYN Spatial Scan Navi』、現実空間を高品質な3DCGアセットとして生成するクラウドアプリケーション『XYN Spatial Scan』、高画質で安定した映像表示を実現するレンダリングプラグイン『XYN Spatial Renderer Plugin』の3つ。
これらのソフトウェアツールを活用し、映画やドラマ、CM制作などにおけるバーチャルプロダクション向けに、3DCGアセットの撮影・生成・活用を支援する。数メートル規模の大型LEDウォールやリアルタイムレンダリング環境での使用を想定した、プロダクション品質のフォトリアルな3DCGアセットの効率的な利用を可能にする。
「XYN」は、2025年1月の発表以降、同年11月に開始した「空間キャプチャーソリューション」のベータ版による先行活用での知見をもとに開発を続けているという。今後は、アプリケーションのラインアップの拡充や機能追加により、バーチャルプロダクションだけでなく、ゲームやアニメ、建築、製造、デジタルツイン、文化財のアーカイブなど、より幅広い分野での活用を目指す。さらに、各業界の標準的な3DCG制作ツールやゲームエンジンとの連携を想定したプラグインやサービスなどを順次展開し、シームレスなワークフローの構築に貢献するとしている。
XYN Spatial Scan Navi
◾️ARナビゲーション機能により、リアルタイムに撮影をアシスト
デジタル一眼カメラαとスマートフォンを接続することで、撮影すべき位置や角度をAR（Augmented Reality：拡張現実）で可視化し、適切な撮影を支援する。3DCG生成に必要な写真を過不足なく撮影することが可能。
◾️撮影状況を可視化するリアルタイムプレビュー機能により、撮影漏れを低減
撮影した位置を俯瞰して確認でき、また、撮影完了した部分をリアルタイムで分かりやすくプレビューすることが可能。撮影漏れを防ぐことで、制作全体の工数削減に貢献する。
◾️カメラとの自動連携による、撮影と生成ワークフローの効率化
被写体に合わせた最適なカメラ設定および撮影を、アプリケーション側で制御します。空間コンテンツの撮影に関する専門知識がなくても、一定品質の撮影を行うことができる。また、撮影情報やレンズ、カメラのメタデータなどを自動で記録することで、後段の生成プロセスの品質向上や高速生成に貢献する。
◉詳細情報
https://xyn.sony.net/ja/products/xyn_spatial_scan_navi
XYN Spatial Scan
◾️ソニー独自のアルゴリズムにより、バーチャルプロダクションの撮影に最適なプロダクション品質の3DCGアセットを生成
バーチャルプロダクションで一般的に用いられる数メートル規模の大型LEDに表示した場合でも、ソニー独自の生成アルゴリズムにより、反射や光沢、遠景の空気感など、高解像度かつ忠実に再現できる。HDR表示で求められるカラーマネジメントワークフローにも対応可能なデータ生成により、白飛びや黒つぶれを抑えた豊かな階調表現を実現する。
◾️クラウドアプリケーションにより制作環境に依存しない導入および運用が可能
クラウド上で生成処理を行うため、特別な制作環境を用意せずに導入できるとともに、外出先からでもクラウド上で高品質なデータの生成および確認を行うことが可能。また、バーチャルプロダクションで求められるプロダクション品質の3DCGアセットをシンプルな操作で生成できる。
◾️クリエイターの既存ワークフローに柔軟に対応
さまざまなカメラの撮影データに対応するとともに、生成したデータはEpic Games社のUnreal Engineなどのワークフローに組み込むことが可能。さらにαシリーズと、『XYN Spatial Scan Navi』や『XYN Spatial Renderer Plugin』を組み合わせることで、より高品質かつ効率的なワークフローを実現。
◉詳細情報
https://xyn.sony.net/ja/products/xyn_spatial_scan
『XYN Spatial Renderer Plugin
◾️高画質リアルタイムレンダリングで自由度の高いバーチャルプロダクションでの利用を実現
『XYN Spatial Scan』で生成した3DCGアセットのプロダクション品質での再生を可能にするソニー独自のレンダリングプラグインです。LED背景に対して距離やアングルに依存せずに高画質を維持でき、バーチャルプロダクション撮影の自由度を向上する。また、HDR表示をサポートすることで、よりリアリティのある撮影を実現。
◾️クリエイターの演出意図を実現するユーザビリティ
被写界深度の調整や、実写被写体とLED背景のライティングの合わせ込み、LED背景の任意の箇所の色調整、CGの重畳などを行うことができ、クリエイターの意図する演出表現の実現をサポートする。
◾️業界標準のワークフローに対応し、さまざまな環境で利用可能
バーチャルプロダクションの運用で利用されるUnreal Engineや、映像再生データの統合や送出、制御に用いるDisguise社などのメディアサーバーやソフトウェアに対応しているため、既存の制作環境への導入が可能。さらに、撮影前のシミュレーションや撮影時のLEDディスプレイの色補正などを行える「Virtual Production Tool Set」と連携することで、より効率的なワークフローを実現。
◉詳細情報
https://xyn.sony.net/ja/products/xyn_spatial_renderer_plugin
XYN Webサイト
https://xyn.sony.net/ja/