Cocos2d-x Talks #2 「サウンド実装のちょっとした気配りで ユーザに”快適感”を。 ＆サウンドミドルウェア「ADX2」のご紹介」
•
3 gefällt mir•5,829 views
3/13のイベントCocos2d-x Talks #2で紹介したスライド資料です。 http://www.cri-mw.co.jp/dev_app/
Empfohlen
Weitere ähnliche Inhalte
Was ist angesagt?
Was ist angesagt? (17)
Ähnlich wie Cocos2d-x Talks #2 「サウンド実装のちょっとした気配りで ユーザに”快適感”を。 ＆サウンドミドルウェア「ADX2」のご紹介」
Ähnlich wie Cocos2d-x Talks #2 「サウンド実装のちょっとした気配りで ユーザに”快適感”を。 ＆サウンドミドルウェア「ADX2」のご紹介」 (11)
Mehr von Takaaki Ichijo
Mehr von Takaaki Ichijo (20)
Cocos2d-x Talks #2 「サウンド実装のちょっとした気配りで ユーザに”快適感”を。 ＆サウンドミドルウェア「ADX2」のご紹介」
- 2. 2 このロゴの会社です
- 3. ■ CRIのミドルウェア群の総称 製品ラインナップ ・CRI ADX2 オーディオ統合ソリューション ・CRI Sofdec2 動画再生ミドルウェア。複数同時再生、アルファムービーなど ・ファイルマジックPRO ファイル読み込み、圧縮/パッキング、ネットワーク対応 CRIWAREとは
- 5. サウンド演出にちょっとだけこだわる ● サウンド再生比較 単に音が鳴っているのと、ちょっとした演出を入れた場合の違い - クロスフェード - ランダム再生 - パラメータのランダマイズ - ダッキング - 発音数制御 → 自然さ、聞き心地の良さ、ゲーム的な強調。
- 6. ちょっとした演出を入れる • BGMは「フェードイン」「フェードアウト」「クロスフェード」 切り替え時に音がブツッとなると不快！ →クロスフェードで自然と切り替わるように。 • セリフやジングルが聞こえやすくなるように BＧＭがガンガン鳴っていると肝心な音が聞こえない！ →目立たせたい音がなる時だけ、BGMの音量を下げる。 • 効果音にバリエーションをつくる 射撃音とかパンチ音とか、同じ音が続くと単調！ →ピッチを変えたり、フィルタをかけたり、複数のSEを組みあわせて再生したりする。
- 7. たくさん同時に鳴る場合に処理落ちしないか？ノイズにならないか？ • ＳＥは再生数上限をつくろう – 爆発音とか、効果音が重なりすぎると音が割れて不快。 – 音を鳴らしまくると、負荷は当然重くなる。 • コーデックは適切に選ぼう – oggやmp3をむやみに使うと、再生時に突発的な CPU負荷が発生してカクッとする場合がある。
- 8. • SEはメモリ再生 – 必要なデータだけ読みこむように – Wavの場合はデータが大きいので注意。 • ボイス、BGMはストリーミング再生 – （端末ストレージ、SDからの）ストリーミング再生 – 再生レスポンスは多少かかるが、メモリ使用量は小さくなる。
- 9. 実装だ！
- 10. iOS：よい
- 11. Android：大変！！
- 12. なにが大変？ • サウンド再生が遅い – OSの問題で、根幹解決は難しい • 特定の端末で不具合 – シーク再生が変、ストリーミング再生してるとだんだんズレる – Android 5.0 (Lolipop)でうまく動かない – アプリがバックグラウンドに入ると、音周りが挙動不審に • データの保護は期待できない – SDカードからoggデータが抜かれる
- 13. 何をすればいいか • SimpleAudioEngineを使う？ – WavやMP3の再生をする。それだけのもの。足りない… • サウンド機能の拡張 or 自前実装が必須 – イントロ+ループ再生などの再生 – 任意位置からの再生 – ピッチ変更などのエフェクト – サウンド再生数上限の拡張 • OpenSL ESやOpenALの知識が必要 – かつ、Android機種個別の対応が・・・ – 音声再生時刻のカウントとか・・・
- 14. サウンドミドルウェア
- 15. 「ADX2」セット内容 • 専用サウンドツール「CRI Atom Craft」 – ゲーム内での音の鳴り方を管理・設定するツール • サウンドライブラリ – サウンド演出の実装がラクに – オリジナルの圧縮コーデックで小さく – 動的なサウンドエフェクト適用がラクに • ピッチチェンジ、リバーブなど各種エフェクト • 複数の音を時系列に配置して再生 – インタラクティブな音作り
- 18. 「ADX2」の”キュー”という概念 名前：「Shot1」 ※この名称で プログラムから呼ぶ • 同時再生の上限値：３ プログラムからコールされまくっても大丈夫 • カテゴリー：SE カテゴリーごとのボリューム変更などに使う • プライオリティー：５ カテゴリー内で優先度をつける。 波形データと再生位置 キューの設定欄 （一部）
- 21. 「ADX2」で設定できるサウンド制御 • ボリューム制御 – 音ごとのボリューム制御 – 曲・効果音・ボイスをカテゴリ分けして、 一括ボリューム管理 • 再生制御 – 再生優先順位 – 効果音の後発優先、先発優先 – 同時発音数の制御 – ランダム再生 • DSP – ピッチシフト – リバーブやエコーなどエフェクト – パンニングや距離減衰など3D効果 • 曲の再生制御 – 曲と環境音の同時再生 (２曲の同時ループ) – 曲の途中ループ – 曲の途中停止・途中から再生 • フェードイン、フェードアウト – フェードの長さ調整 – クロスフェード – カテゴリをトリガにした 自動音量ダッキング「REACT」 • 3Dパンニング/ポジショニング これは一例でス。便利な機能は まだまだありまス！
- 22. 「ADX2」の独自コーデック • HCA / HCA-MX コーデック – 圧縮率はmp3 / Oggと同程度（人の声の圧縮に多少強い） – CPU負荷低め、大量にリクエストしても急に負荷が上がらない – さらにデコード処理負荷を大幅に抑える特別な仕組み
- 23. HCA-MXコーデックの特長 • 音を同時再生する際のCPU負荷が軽くなります。 • 従来wavで鳴らしていた素材も圧縮できるようになり、 ディスク容量とメモリ使用量が節約できます。 • 制限事項 – HCA-MXでは音ごとのピッチ変更、フィルタ変更などができません。 – サンプリングレートを統一する必要があります。(デフォルトは32KHz)
- 24. イントロ付きループ ■ 途切れず、綺麗にループするBGM - ループポイント付き波形の圧縮・再生に対応 - イントロ付きループBGMをプログラムの工夫無しで実現
- 25. サウンドごとの音量調整 ■ ADX2のオーサリングツール上で調整 - BGMやSEの音量はADX2ツール上で調整。素材波形の変更不要。 - BGMカテゴリを作って、BGMの一括音量調整。 - アプリからの動的な音量調整ももちろん可能。
- 26. ダッキングとカテゴリ ■ カテゴリ指定によるダッキング - 音声再生中はBGMの音量を下げるような処理をデータ側のみで設定。 - サウンドをカテゴリにわけて、まとめてボリューム調整するなどの利用も可能。 M01 音楽カテゴリ （変化） M02 M03S01 セリフカテゴリ （トリガ） S02 S03 ダッキング指示 変化 カテゴリ トリガ カテゴリ
- 27. [Android] 再生レイテンシ ■ Android用の低レイテンシ再生モード - ネイティブサウンドレンダラという低レイテンシ再生モードあり。
- 28. [Android] 遅延推測機能β版 ■ 端末のサウンド再生遅延時間をライブラリで推測 プログラムによる再生指示 スピーカーからの発音 ここにかかる時間が「再生遅延時間」。??? ミリ秒。 ● Android の場合 - 遅い！ - 機種によって差が激しい！遅いと 200msec以上。 - 誰も教えてくれない！ ADX2に遅延時間推測関数を追加。 ※β版です。現在はUnityのみ。
- 30. インゲームプレビュー機能 ■ スマートフォン実機と通信 - スマートフォンで実行中のゲームと CRI Atom Craft でWiFi接続。 → ゲームで実際に色々な音が重なる状況で聞こえ方を調整可能。 音量、エフェクト、メモリ再生の波形などを直接変更。 - CRI Atom Craft で作成中のサウンドをPCではなくスマホから鳴らす事も。 （ターゲットプレビュー機能）
- 31. 「ADX2」導入メリット • 音声圧縮＆再生負荷を軽減 – 多重再生時に重くならないモードがある独自コーデック。 圧縮やクオリティはmp3/Ogg同等ながら、再生負荷が低い。 – イントロ付きループBGMが使える。(任意ポイントでのループ) 音質アップと容量削減が両立できます。 • ツールによるサウンド演出設計 – 大量音声データの管理がラクに。 – プログラムを触らずに音量やエフェクトの調節ができる。 サウンド周りのコーディング量が大幅に減ります。
- 32. ざんねんながら • ブラウザゲーム出力に非対応 – ネイティブライブラリを動かせるブラウザが現状Choromeしか無いため。 (WebGLとかでも同様) • サウンドツールはWindows版のみ – Mac版は開発中です。ゴメンナサイ。 – Pallarels、VMwareなどの仮想環境で動作確認とっています。
- 33. 個人開発者の方へ
- 35. 「ADX2 LE」とは • 無償版サウンドエンジン＋オーサリングツール – 個人のインディーゲーム開発、ゲームジャム向け • 無償で利用可能（有料で頒布するゲームに使ってもＯＫ） • ゲーム販売の売上1,000万円以下まで • 二次創作は自己責任だぞい 公式サイト http://www.adx2le.com/ からSDKダウンロード
- 36. 「ADX2 LE」の使用条件 • 前年度年商が1,000万円以下の会社または団体・個人であること • コンテンツの配信元が自身であること ※販売権を自身で持ち、パブリッシャーを介さず自分でApp Storeなどに登録する。 • コンテンツの売上が1,000万円以内であること 「ADX2 LE」を使用したコンテンツ配信の条件 （コンテンツの無償/有償に関わらず) “本コンテンツには、（株）ＣＲＩ・ミドルウェアの 「CRI ADX2 (TM) LE」が使用されています。” • 著作権表記
- 37. 「ADX2 LE」情報 • Facebook ADX2ユーザー助け合い所 – https://www.facebook.com/groups/adx2userj/ • Wiki サウンド助け合い所 – http://www53.atwiki.jp/soundtasukeai/
- 39. Sofdec2のキーポイント ■ 動画をテクスチャとして使う - ムービーテクスチャ を実現。動画を貼り付ける。描画はアプリの自由。 - 透過情報 を入れたアルファムービーが利用可能。 演出の幅が大きくアップ。 - 柔軟でリッチな再生機能 にも対応。 (例： シームレスループ／連結再生、複数再生、タイミング情報埋め込み)
- 40. Sofdec2 for cocos2d-x ムービー ■ ムービースプライトクラス（サンプル） - スプライトにムービーを貼ることができます。 - cocos2d-x ならではの、クリッピングノードやアクションの機能も利用可能。
- 41. Android版デモのダウンロード ■ アルファムービデモのAndroid版 - http://crimw.me/alphamovie - 「提供元不明のアプリ」のインストールを許可してください。 - 容量 約23MByte ＜動作環境＞ ARMv7対応のCPU