リアルタイムでピッチを取得する機能はありますか？

Question

スマートフォンのマイクから取得したデータからリアルタイムでピッチを判定する機能はありますか？

Answer 1

現時点では、すぐに利用できるAPIまたはピッチ分析プラグインはご用意しておりません。

メーターエフェクト(Meter effect)プラグインによるRTPCの出力をお使いいただく方法(このRTPCは、getRTPCVale()を用いてゲーム内のメーター値を取得することにお使いいただけます)をご提供しておりますが、残念ながらピッチに対応するものはございません。

 

解決方法の1つとして、独自のエフェクトプラグインを作成されることが挙げられます。

Audio Input Sourceプラグインを使用しマイクからの入力を取得して、Wwiseパイプラインの任意の箇所(オーディオバスやSFXなど)にセットした独自のエフェクトプラグインで必要な分析を行い、その結果をゲームに送信する、という方法になります。

 

また、分析そのものにつきましては、アプリケーションと必要な精度によって、ピッチトラッキング用の各種アルゴリズムの選択が異なってくることと思います。

例えば、シンプルなZero-Crossingsはホイッスルのような音には十分ではないでしょうか。またYINメソッドなどのアルゴリズムは通常、自己相関を使用しておりますのでCPUの負担となります。スマートフォンでお使いの場合にはご注意ください。