グーグル、VRを身近にする3Dオーディオ技術を公開
グーグルの360度動画のデモ 特設ページから
<グーグルは、ウェブ上にあるVRコンテンツに追随して音も移動する、「オムニトーン(Omnitone)」というプロジェクトを公開した。これによりVRコンテンツがますます身近なものになりそうだ...>
バーチャルリアリティ(VR)ヘッドセットが去年から今年にかけて、サムスン、HTC、フェイスブック傘下のオキュラスVRといった大手から次々に売り出され(ソニーは今年10月発売予定)、VRが身近になってきた。ただしグーグルは、そうした専用機器を新たに追加しなくても、手持ちのPCとヘッドホンでVRコンテンツに一層没入できる環境を整えようとしている。
【参考記事】リアルなVRの時代がついに到来
ウェブに「空間音声」を普及させる取り組み
グーグルは7月25日、「オムニトーン(Omnitone)」という新たなオープンソースプロジェクトを立ち上げた。これは、ウェブ上にあるVRコンテンツや360度動画を見る場合に、動画に追随して音の定位も移動する、いわゆる「空間音声」のレンダリング技術をオープンにして、既存のブラウザで手軽に再生できるようにするという取り組みだ。
グーグルがブログで発表し、ポピュラーサイエンスなどが報じたオムニトーンによる音声処理の仕組みは、以下のダイアグラムで図解されている。
上から説明すると、あらかじめ4チャンネルで録音された音声を伴う空間メディア(VRコンテンツ)が、「ローテイター(Rotator)」と呼ばれる部分に送られ、ここにはVRヘッドセットやスマートフォンからの方向センサーデータも送信される。これら2つの入力情報がローテイターでアンビソニックス(音波の方向感も再現する高忠実度再生)技術により処理され、8方向の音声ストリームに分けられて8チャンネルの仮想スピーカーに送られる。最後に、仮想スピーカーからの8チャンネルの音声を両耳用にレンダリングしてステレオ音声ストリームに変換し、PCなどのイヤホンジャックから出力、という流れになる。
とはいえ、図や文字で説明されるより、実際の空間音声を動画と一緒に体験するほうがはるかに理解しやすいだろう。グーグルはオムニトーンの特設ページから、2つの360度動画のデモを公開している(ただし、これらの2本の動画は、同プロジェクトのために制作されたコンテンツではなく、既存の空間音声付き360度動画をウェブページ上で再生できるようにしたもの)。ブラウザで再生する際、ヘッドホンやイヤホンで聴くと、マウスやタッチパッドで映像を右や左に移動させるのに合わせて、楽器や歌声が出てくる位置が動くのを実感できるはずだ。