Mercari GDC 2019 報告会 #mercariGDC https://mercaridev.connpass.com/event/123663/

1. @ash_yanagisawa
Reality is Complex
ARの普及までの長い道のり
#mercariGDC

2. XR Research Engineer at mercari R4D
特別講師 at 文化服装学院
研究実績 : スマートグラスに最適化したメルカリ (特許出願済)
栁澤 慧 @ash_yanagisawa

3. 今をときめく企業によるARの設計手法の紹介。わくわく

4. Tendar - 飼い主の表情がさかなを成長させるARアプリ 出典 : https://youtu.be/v4YMQRwsNr8?t=7

5. たしかに現実は複雑ですよね。ARの普及には何が必要なんだろう

6. … って。ARの課題は、把握しきれないほどあるってことか。

7. ARの普及には様々な知識が必要だとわかったので
幅広くセッションを観てきました

8. ARの未来
ディズニーの魔法
God of Warの
パーティクル表現
Marvel’s Spider
ManのAI技術
VRを普及させるには ARのデバッグ手法
Fashion in (Most)
Games Sucks
AIアバターの倫理観UnityのAI技術
6DoFを音楽に活用
音声認識と
ハンドジェスチャーAlexaの活用

9. 6DoFを音楽に活用
音声 / 音楽

10. 6DoF - 3軸の移動と回転

11. Vacation Simulator 出典 : https://youtu.be/RSLN_Zlu3mg

12. 音楽によるアクセントは開発の初期段階で検討するべき

13. Alexaの活用
音声 / 音楽

14. Alexaが活用されたボイスファーストのゲーム

15. クイズゲーム 出典 : https://youtu.be/WA20rRVfe1Y?t=83

16. Alexaが活用されたゲームと連動するアプリ

17. Call of Duty® Alexa Skill 出典 : https://youtu.be/M0qYOfotof8?t=13

18. グラフィカルUI から 音声UI へ

19. 音声認識とハンドジェスチャー
音声 / 音楽

20. 指先の物体と音声の内容によって、キャラクタを操作

21. 音声認識エンジンはJulius

22. 特定の物体との位置関係

23. Marvel’s Spider ManのAI技術
AI

24. 敵の一人がスパイダーマンに攻撃しているとき、他の敵は攻撃しない

25. 表示中かつ乱闘中の敵の位置と属性情報をもとに他の敵を管理

26. Marvel’s Spider-Man - PS4 Trailer | E3 2017 出典 : https://youtu.be/8pR0o2fGyHg?t=118

27. UnityのAI技術
AI

28. とうとうVer.0.8が今月にリリース

29. ML-Agentsは強化学習と模倣学習が可能

30. ML-Agentsの導入フロー

31. Snoopy Pop

32. AI自身に戦略や行動計画を立てさせる技術 AI PlannerがGDC2019で正式公開

33. AIアバターの倫理観
AI

34. パネルディスカッションの風景

35. AIの倫理についてディスカッションするメンバー

36. Why Fashion in (Most) Games Sucks,
and Why You Should Care
UI / UX

37. ゲーム内のファッションはビジネスになる

38. このファッションがユーザーに何を伝えたいか分からない。水着？

39. ハロウィンコスチュームでユーザーの課金を誘引

40. God of Warのパーティクル表現
UI / UX

41. Disintegrate Meshes - 敵を倒したときのパーティクル

42. Disintegrate MeshesがGod of Warで使用された場面

43. Disintegrate Meshes 出典 : https://youtu.be/K0u_kAWLJOA?t=152

44. 3DぬりえAR ぬってぽん！ daub 出典 : https://youtu.be/LIqscLUe9u0?t=19

45. ディズニーの魔法
UI / UX

46. どうやってゲストを世界観に引きこむか

47. ゲストを世界観に引き込む6つの方法

48. キャラクターと友達になる

49. ディズニーのタートル・トーク

50. VRを普及させるには
XR

51. VR体験型施設の一覧

52. Steamユーザの1%未満しかVRヘッドセットをもっていない

53. VRの普及には6つの問題の解決が必要

54. ARのデバッグ手法
XR

55. フォトグラメトリ

56. Oculusのペイントツールで穴を塞ぐ

57. 現場の3Dモデルがあれば、現地でなくてもデバッグ可能

58. ARの未来
XR

59. Harry Potter Wizards Uniteの紹介 出典 : https://youtu.be/5ZDJifrmvu8?t=63

60. Nianticが考えるARの未来

61. まとめ