Science of Immersion(没入の科学) | 株式会社アートウィズ
Science of Immersion - 2列レイアウト

空間音響システムの必要性

人間の脳は、複雑な音の環境に対処できるよう設計されています。
周囲で多くの人が話しているカクテルパーティーを想像してみてください。誰かがあなたに話しかけ、BGMが流れ、グラスがカチンと嗚る一ーそんな状況でも、脳は特定の音に集中しつつ、他の音を遮断することができます。
これは、異なる方向から届く音を区別し、切り分けるのが容易だからです。これは「Spatial Unmasking (空間的アンマスキング)」として知られており、ミックスにおいて音の分離、明瞭さ、そして聞き取りやすさを実現する上で極めて重要な要素です。 しかし、すべての音がスピーカーのように単一の音源から発せられる場合、ある音が他の特定の音を遮ったり、「マスキング」したりする傾向があります。
また、従来のステレオの左右ミックスでは、中央にいるこ‘く一部の聴衆だけがより豊かな 体験を楽しんでいる一方で、大多数の聴衆は左または右のスピーカーに偏ったミックスを耳にしています。
一方、TiMax SoundHub空間音響システムは、現実の世界を再現し、音源の位置を正確に特定できる音を提供することで、耳と脳が状況の把握をより的確に行えるようにします。
しかし、このような正確な音源定位を実現するには、音量と遅延の両方を制御し、いわゆる「Haas Precedence Effect (ハース先行音効果)」を適切に管理することが不可欠です。

sciencecats.jpg

The Haas Precedence Effect(ハース先行音効果)

「ハース先行音効果」とは、人間の脳が、音量が大きいものだけでなく、たとえ1 ミリ秒未満の「わずかな差」であっても、最初に聞こえた音の位置を特定する傾向があることを指します。これにより「タイム・パニング(時間的パンニング)」が生じ、聴き手は自然と、自分から最も近いスピーカーから聞こえてきた先行音に注意を向けます。
これを具体的に説明すると、観客1人とその隣の人との距離は約2ms (2フィート)です。したがって、優先順位を適切に管理しないと、観客全員が空間的に異なるショーを聞いてしまうことになります。
つまり、ある人は誰が話しているのか確認しようと本能的に左を向き、別の人は右を向いているかもしれませんが、実際にはステージの中央にいる誰かが話している可能性もあるのです。
したがって、ハース効果については、まずそれが引き起こす可能性のある本質的な問題を排除するために「制御」し、その後、創造的な目的のために「活用」する必要があります。ハースディレイを積極的に適用することで、音源間の実際の分離を維持しやすくなり、ミキシングがより容易になります。

listen.jpg

コントロールするか、コントロールされるか

空間音響PAにおいて正確な定位を実現するため、TiMax SoundHubの空間レンダリング機 能では、複数の可変「オーバーディレイ」を適用し、すべての聴衆がオーディオコンテンツの発生源からの最初の波面到達を確実に定位できるようにすると同時に、回避すべき特定の境界を自動的に処理します。
例えば、オーバーディレイが短すぎると、第1 波面と第2波面の到達時間が非常に近いた め、一部の波長が打ち消し合う「コムフィルタリング」が発生する可能性があります。その結果、オーディオ信号に様々な色付けが生じ、「金属的な音」や「位相のずれ」のような音質になることがあります。増幅された声は、馴染みのある基音や倍音が欠けているとすぐに気づいてしまうため、特にこの影響を受けやすい傾向があります。
同様に、オーバーディレイが長すぎると、リスナーは「Echo Perception Threshold (エコ 一知覚閾値)」と呼ばれる状態にさらされます。この状態では、顕著な二重の音が到着し、それがエコーとして聞こえたり、複数のエコーが混ざり合って不快で注意をそらすような残響音となったりします。
しかし、それだけではありません。二次到達音、すなわち増幅された音が大きすぎると、 ステージ上の定位を実現しようとするハース先行音効果の働きを打ち消してしまう可能性があります。そのため、TiMax SoundHubは適応型パラメータを適用して状況に応じた可変的なレベルシェーディングを行い、空間的にPAされるステージ上の音源に対する観客やスピーカーシステムの位置関係を自動的に補正します。

control.jpg

Source-oriented reinforcement(音源指向型拡声)

「ハース効果イメージング」を適切に適用することで、元音源の位置特定精度が向上し、PAされているという感覚はほとんど、あるいはまったく生じなくなります。これは「音源指向型拡声(SOR)」とも呼ばれ、タイミングや位置の特定という点で、各演奏者、音源、または再生トラックに、それぞれ独自のPAシステムを提供するような効果をもたらします。
これにより、認知感覚が音源をより自然な音場として分離できるだけでなく、視覚的要素と聴覚的要素を統合し、互いに矛盾することなく補完し合うようになります。矛盾が生じる と、観客の注意が散漫になり、微妙なストレスを引き起こす原因となります。 観客にとって、舞台の右側にいる俳優の姿を見ながら、その声が左側や頭上のスピーカーから聞こえてくるのは、結局のところ気が散るものです。この不一致が複数の出演者にわたって重なると、観客は「誰が何を言っているのか」を見極めようとする努力によって、無意識のうちにストレスを感じるようになります。そのため、「不自然さをあえて受け入れる」ことが難しくなり、そのパフォーマンスの魅力も薄れてしまいます。

speaker.jpg

ステージトラッキング機能付きダイナミックディレイマトリックス

TiMax SoundHub独自のダイナミック・ディレイ・マトリックスにより、各マイクや音源とすべてのスピーカーとの間で複数の時間調整を同時に行うことが可能となり、優先順位を戦略的に管理することで、リアルタイムに定位感を制御します。視覚的・聴覚的刺激が同期することで、観客全員が、臨場感あふれるドラマや感動的な音楽パフォーマンスに没入できるようになります。
さらに、パフォーマーのステージトラッキング機能を追加することで、俳優がステージ上を移動する際の調整が自動化され、サウンドエンジニアはミックスの微妙なニュアンスやダイナミクスに集中できるようになります。これこそが、TiMaxの基本理念である「Hear the Sound, Not the System (システムではなく、音そのものを聴く)」の起源です。
正確な定位のさらなる大きな利点は、空間ミックスにおける異なる音源間の分離が向上することで得られる明瞭さとインパクトです。声やオーケストラなどのアンプ増幅されたアコースティックコンテンツにおいて、TiMax SoundHubは、従来のPAアプローチのように音圧で圧倒するのではなく、パフォーマンスに調和した音響補強を実現します。
したがって、究極の目標は、観客をパフォーマンスに引き込み、技術がパフォーマンスの邪魔になったり、衝突したりすることを防ぐことです。

TiMax-SoundHub1 d4cutout1-2048x1473.png

TiMax Image Definitionョン) (イメージ定義)

空間オブジェクト
今や、オーディオオブジェクトという言葉を誰もが耳にしたことがあるでしょう?ーー画面上に表示される、マイクや楽器、エフェクト、トラックを表す「オブジェクト」のことで す。これらを自由に移動させて、空間内やその周辺に音源を配置したり、パン調整を行ったりします。
さて、TiMaxは空間領域に新たなオブジェクトを導入しました。この機能こそが、TiMaxを他の空間処理ソフトと一線を画し、他のどのイマーシブオーディオプラットフォームよりも汎用性が高く、柔軟で、効果的なものにするのです。それが、非常にシンプルで理解しやすい「Image Definition」です。

1-TiMax-ImDef-Spatial-Objects-2048x1451.jpg

「Image Definition」とは何か、またどのような役割を果た すのか?

TiMax Image Definitionは、TiMax SoundHubの主要な機能の一つであり、サウンドエンジニアがライブパフォーマンスやイマーシブ環境において、音響の空間的な定位を正確に「定義」し、コントロールすることを可能にします。簡単に言えば、ユーザーが定義したImage Definitionのコレクションは、複数の仮想的な音の「イメージ」や「位置」のレイヤーとして機能し、音声、楽器、効果音などのサウンドオブジェクトが、空間内のどこで聴衆に知覚されるかを決定します。

2-What-Is-an-ImDef-asnd-What-Does-it-Do_-2048x1451.jpg

「Image Definition」はどのように機能するのでしょうか?

TiMax Image Definitionsは、ディレイマトリックス内のルーティング/イメージングオブジェクトとして作成されます。これらは、空間内に配置された各スピーカーに対して、個々の入カソースオブジェクトことにレベルやディレイ時間の調整を行うよう指示し、原音がPA よりも早く聴衆の耳に届くように(ハース効果参照…)、あるいはマルチチャンネル再生コンテンツにおいて波面が平坦になるように、戦略的に調整を行います。これにより、実際には複数のスピーカーから音が発せられているにもかかわらず、脳は音が特定の点や場所から来ているように知覚するようになります。
例えば、観客に俳優の声がステージ左側から聞こえているかのように感じさせたい場合、 「Image Definition」は、ステージ右側のスピーカーにはわずかに長いディレイを、ステージ左側に近づくにつれて徐々に短いディレイを設定します。これにより、どの席に座っていても増幅された音が常に遅れて届くようになり、脳はその音を俳優から発せられているもの と認識するのです。

3-How-Do-ImDefs-Work_-2048x1459.jpg.jpg

「Image Definition」の作成

TiMaxは、ステージ全体や周囲、さらには頭上に至るまで、一連の「Image Definition」を 迅速に定義・計算することができ、パフォーマンス中にインプットオブジェクトを補間して、異なる位置に配置したり移動させたりします。これはディレイおよびレベル・パンニングを採用しているため、中央のスイートスポットや任意のホットスポットだけでなく、観客全員に対して正確な音像定位を実現します。
一見すると非常に困難な作業に思えるかもしれませんが、TiMax PanSpaceワークフローの魔法により、わずか数回のキー操作で、さまざまな空間的目標に合わせた数十から数百もの「イメージ定義」を瞬時に生成することができます。さらに、TiMaxだけがすべての音場パラメータを完全に可視化し、自由に制御できるため、必要に応じてそれらを確認・修正したり、独自の「Image Definition」をゼロから手動で作成したりすることも可能です。これが、柔軟性が高く直感的なTiMaxの空間プログラミングワークフローが持つ、最大の利点の一つです。

4-Creating-Image-Definitions-2048x1451.jpg

ダイナミック空間コントロール

Image Definitionによる空間化は動的に行うことが可能であり、つまりパフォーマンス中にその空間的な影響がリアルタイムで連続的に変化します。これは、パフォーマーがステージ上を移動するライブショーにおいて特に必要とされます。TiMaxをTiMax TrackerD4などの パフォーマートラッキングシステムと連携させることで、Image Definition間で音源(マイクなど)を自動的に補間し、音がパフォーマーの位置に追従するようにすることができま す。また、TiMax PanSpace を使用すれば、トラッキングシステムがなくても、マイクやアニメーション効果のパン移動を描画し、それをキューとして自動的に再生することができます。
そしてもちろん、 TiMax はレベルだけでなくディレイも継続的に変化させます。当社独自 の、極めて洗練された「秘伝の」総合的なFPGA 処理により、リアルタイムでさまざまなモーフィングアルゴリズムを適用し、ソプラノ歌手からカモメの鳴き声に至るまで、あらゆる種類の動くコンテンツに対して、極めて滑らかでシームレスな音響的透明性を確保します。

5-Dynamic-Spatial-Control-2048x1222.jpg

レイヤリングとゾーニング

TiMaxでは、会場全体に異なるタイプの「Image Definition」を重ね合わせることで、さまざまな空間的な処理を行うことも可能です。音の知覚の仕方を変える必要がある複数のゾーンやエリアを設定し、多様なイマーシブ体験を創出できます。例えば、あるレイヤーでは観客がステージ上で行われている会話や歌声を聴く一方で、別の空間レイヤーでは、リバーブをかけたミックスや交通音、雨音などを観客の後方全体に包み込むように配置することができます。
このワークフロー要素により、他の同等の空間処理プロセッサでは実現できないレベルの 分離と独立性を、異なる空間オブジェクト間で確保できます。これにより、望ましくない音響的干渉を防止できるだけでなく、最も困難な状況下であっても、イマーシブな創造性をより意欲的かつ大胆に発揮することが可能になります。

6-Layering-and-Zoning-2048x1475.jpg

これで、あなたは「Image Definition」のエキスパートですね

本質的に、TiMax Image Definitionは、精密なディレイ調整を活用して、パフォーマンス環境内で音を空間的に配置する仮想音響定位ツールです。これにより、音がどこで知覚されるかを細かくコントロールすることができ、音を視覚的な手がかりと連動させたり、音に動きや奥行きを生み出したりすることで、ライブパフォーマンスをより没入感あふれるダイナミックなものにします。
Image Definitionは、マトリックスレベル(ミキシングコンソールのAUXや出カセクションで行うのと同様)に加え、マトリックスディレイも備えた、いわば高度なルーティングボタンと見なすことができます。これにより、音を本当に意図した場所から響かせることが可能になります。TiMax PanSpaceはこれらすべてを自動的に処理し、ディレイも併用している ため、ステージ全体および観客がどこに座っていても、空間的イメージングが効果を発揮します。

science2.jpg
イマーシブサウンド FAQ - TiMax

イマーシブサウンドに関するよくある質問

「イマーシブオーディオ」とは、空間オーディオコンテンツや処理によって達成される成 果、目的、あるいは目標を指し、それ単体で、あるいは照明、映像、舞台美術、香りなどの他のメディアと組み合わせて、リスナーに没入感あふれる魅力的な体験をもたらすもので す。
しかし、「イマーシブオーディオ」という用語は、オーディオに詳しくない人々が、空間音響処理を行うマルチチャンネルシステムと、単にステレオやモノラル再生を行う従来のシステムとを区別しやすくするための、便宜的な表現としてよく使われています。
偽りの言葉に注意してください。「イマーシブ」という用語は、デバイス、機械、スピーカー、スクリーン、照明器具、カーテンなどを形容するために適切に使用されるものではありませんが、実際にはそう使われてしまうことがよくあります。率直に言えば、私たち自身 も、TiMaxについて議論を始める際に前述のような便宜性がある場合、時折この言葉を使ってしまうことがあります。しかし重要なのは、「イマーシブ化」という話題が出た際には、常にその言葉が何を意味し、何が求められ、あるいは何が目指されているのかを正確に把握することです。

空間オーディオとは、さまざまな方向、距離、高さから音が聞こえてくるような感覚を再現し、立体的な音響環境を作り出すオーディオ技術を指します。これは、人間が現実世界で自然に音を認識する方法を再現することを目的としており、オーディオ体験における没入感と臨場感を高めます。空間オーディオには、実際の音響パノラマを忠実に再現したものから、より包み込むような、あるいは「映画のような」創造的な空間効果を実現することを目的とした、強化された、あるいは合成された音場まで、幅広いものがあります。

空間的アンマスキングとは、聴覚知覚における現象の一つで、対象となる音が競合する音から空間的に分離されると、その音を検知・理解する能力が向上するものです。
つまり、対象音が干渉音とは異なる方向や位置から提示されると、聴き手はその対象音を識別し、それに注意を向けることが容易になります。この効果は、背景雑音や複数の音源が存在する環境において、目的の音の明瞭度を高めるために、空間オーディオ処理でよく利用されています。
対象音を干渉音から空間的に分離することで、空間的アンマスキングは、目的とする聴覚情報の全体的な明瞭さと知覚上の顕著性を高め、より効果的なコミュニケーションと聴取体験をもたらします。

「ハース先行音効果」(第一波面の法則とも呼ばれる)とは、異なる方向から2 つの同一の音が提示された際、人間の聴覚系がそれらを融合した音像として知覚し、2つの音の間の遅延が十分に短い場合には、最も早く到達した音の方向を音源位置として特定する心理音響現象を指す。このような場合、音の知覚される位置は主に最初に到達する音(「リード」または「先行」音と呼ばれる)の方向によって決定され、遅れて到達する音は、定位による増幅、すなわち音量の増強をもたらします。
イマーシブ空間オーディオにおいて、ハース先行音効果は、リアルな空間感と方向性を創出する上で極めて重要な役割を果たします。各チャンネルに送られるオーディオ信号のタイミングと振幅を調整することで、オーディオエンジニアは演奏の自然なパノラマを再現し、3次元空間内で音源を正確に配置することができます。この技術により、音がリスナーの周囲の特定の場所から発せられているかのように感じられる、臨場感あふれる聴覚体験を生み出し、没入感とリアリティを高めることが可能になります。

音源指向型拡声(SOR)とは、オーディオエンジニアリングおよび音響拡声における手法の一つであり、特定の音響環境において、個々の音源や注目すべき音源の位置を特定するために、音声信号の増幅と処理を個別に最適化するものです。リスニングエリア全体で音を均一に増幅することに主眼を置く従来の手法とは異なり、音源指向型拡声は、特定の音源の明 瞭度、理解度、およびインパクトを最適化するために、局所的な増幅と処理を行うことを目的としています。
音源指向型拡声で、オーディオエンジニアはディレイ・マトリックス信号処理を介してマイクとスピーカーシステムを戦略的に連携させ、主要な音源の位置特定を優先させることで、ステージ上のパフォーマー、会議室の司会者、あるいはオーケストラやバンドの楽器の音の明瞭さと理解しやすさを向上させます。これらの重要な要素に対して空間的な増幅を行うことで、音源指向型拡声は、音響条件が厳しい環境や競合する背景騒音の中でも、聴衆が最も重要な聴覚情報を明瞭かつ正確に受け取れるようにします。これにより、最終的には聴衆にとってより魅力的で没入感のある聴覚体験が実現されます。

オブジェクトベースの空間化とは、一般的に2Dまたは3Dにおけるマルチポイント・パンニングを指し、通常、従来のパンポットやジョイスティックで扱える範囲よりも多くのパン位置をカバーします。可視化ソフトウェア内では、通常、マイク、楽器、エフェクト、またはトラックを表す画面上の色付きのドットとして表示され、それらが空間内やその周囲に配 置・移動されます。これにより、サウンドエンジニアやクリエイターは、音を従来のチャンネルではなく個別のオーディオオブジェクトとして表現することで、没入感のあるオーディオミックスを作成することができます。オブジェクトベースのオーディオシステムでは、シーン内の各音響要素(セリフ、音楽、エフェクト、アンビエンスなど)は、位置情報やレベル(場合によっては相対的なディレイ)といった独自のメタデータを持つ個別のオブジェクトとして扱われ、さまざまなスピーカーに割り当てられます。

「Image Definition」は、TiMaxに特有のオーディオオブジェクトです。これは、Atmosや TiMaxを含む他の空間オーディオプラットフォームで、オーディオトラック、マイク、楽器などの入カソースを表す、お馴染みの色付きのドットと異なります。
TiMaxでは、音を出したい場所一ーステージ上、サラウンドエリア、頭上、あるいはリバーブやエフェクトなどのための特別なイメージングレイヤーー一の周囲に、「Image Definition」という空間オブジェクトを配置することができます。
ボタンを1つ押すだけで、TiMaxはこれらの「Image Definition」をプリレンダリングし、スピーカーに適切なディレイとレベルパラメータを適用します。これにより、前述の色のついた入カオブジェクトをそれらのオブジェクトの上や間に配置した際、音が正しい位置から聞こえるようになります。簡単に言えば、「Image Definition」は、ユーザーが希望する空間化の目的を達成するために選択した、精巧な出カルーティング・オブジェクトと捉えることができ、これにより、会場全体にいるオーディエンスに対してその効果が確実に発揮されるようになります。

TiMaxは、驚くほど簡素かつ柔軟なスピーカーシステムの構成でも、効果的な定位と空間表現を実現できます。他の空間音響プラットフォームの中には、スピーカーの数や角度、間隔をかなり厳密に定義する必要があるアルゴリズムを採用しているものもありますが、TiMaxの「イメージ定義」の柔軟性により、例えばシンプルなLCR システムであっても、幅・奥行き15~ 20mのステージ上でさえ、説得力のあるボーカルの定位を作り出すことができます。
さらに、ステージや観客エリアが極めて非対称な場合でも、TiMaxはこれらを容易に空間的に再現できます。企業イベントや体験型イベントなどの会場では、理想的な設置位置ではない場所にスピーカーを配置し、かつ視界から隠す必要があったり、観客エリアを複数の方向からカバーする必要があったりすることがよくあります。TiMaxなら、音が定位されるべき方向を大まかに指し示すスピーカーが少なくともいくつかあれば、こうした状況も問題なく対応可能です。こ不明な点がこざいましたら、お気軽にお問い合わせください。我々には農富な実績があります。

物理学の観点から言えば、答えは「はい」です。なぜなら、音速は明らかにあらゆる方向で同じであるため、x軸やy軸と同様に軸z 方向の位置特定にも利用できるからです。ディズニ ーの『アラジン』の世界的なフランチャイズにおいて、重要なシーンの一つは、ワイヤーが見えない魔法の絨毯の場面でした。そこでは、TiMaxとTrackerが使用され、アラジンと王女の声が空の上から聞こえてくるように演出されました。
しかし、耳の形状や生理学的特性により、耳介の形状が水平方向の位置特定に最適化されているため、「頭上」からの音を聞き取るのが難しい場合があります。そのため、『アラジン』のように動きが加わると、可変的なフィルタリング効果によって、実際には単にEQを変えるだけで、脳に音が頭上から来ていると認識させることができるのです。

良い質問ですね。音量レベルには上限があり、それを超えるとハース先行音の効果が失われ、純粋な出カパワーが音像形成を支配してしまいます。また、歯擦音などの高周波成分は、ディレイによる音像形成がうまく行われない1頃向があります。ハース先行音が効果を発揮するのは、主に声などが占める帯域を中心とした中音域においてです。
しかし、これに対処するためのいくつかのエ夫があります。まず、ボーカルマイクや専用のボーカルシステムのハイエンドを2 ~3dBロールオフすることで、エンジニアはフェーダーのレベルを高く保ちつつ、良好な定位感を得ることができます。
ピットに音量の大きいバンドがいる場合や、大規模な屋外ステージの場合は、ステージ奥やセット内に「アンカー」スピーカーを設置して、声の「時間ゼロ」を増幅させます。つまり、ステージから聞こえてくる声をより大きくすることで、ボーカルのイメージングを損なうことなく、フェーダーのレベルをさらに少し上げ、通常8 ~10dBの増幅を実現できます。専門用語を使って人々を感心させたいなら、この手法は「First Wavefront Reinforcement(ファースト・ウェーブフロント・リインフォースメント)」(第1 波面リインフォースメント)というやや大げさな名称で呼ばれることもありますが、その効果は実に顕著です。