映像やCG制作の現場において、AIの技術は様々な自動化・クリエイティブで利用され始めています。そのAI そのものは、従来のデジタル制作と異なる性質も持っており、道具としての AI を正しく理解しておくことも重要です。このセッションでは、既存のAI技術を紹介しつつ、どのようにクリエイティブの現場に取り入れ、理解していくのかをご紹介します。
15. John F. Kennedy (JFK)
November 22, 1963
http://aka.ms/jfkfiles
16. INGEST STORE AI SERVE
Azure Blob StorageAzure Data Factory
Media
(unstructured)
Files
(unstructured)
Cognitive Search
(Azure Search)
Natural Language Processing
Image Processing
Custom Models
Azure App
Service
Cosmos DB Web & mobile
apps
21. Predictions
Personalization Robot journalism
Recommendations
Targeting Feedback loops
Big data と AI 技術による
より感度の高い視聴およびコンテンツ
分析
Bot による会話型の新しいユーザー体
験
Hi, I’m Cortana
Your
Personal Assistant
Conversational apps
with >2 billion users
Cloud-Based の映像制作
AR, MR, VR, スマートスピーカーなど
での
新しい体験
Learn of provider
incentives
Subscribe
Socialize
Receive
personalized
offers
Upgrade
service
Receive
targeted
marketing
Receive
service
Socialize
Receive media
recommendatio
ns
AI
Search for
current and
archived
media
Consumer
360
Receive media
recommendation
s Consume
anywhere,
anytime
Use second
screen
Purchase
media on
demand
View details and
news about
shows,
performers,
athletes
Manage
media
library
Create
custom
channels
視聴者のクラスターごとに適切な媒体
と
なりえるマーケティング プラット
フォーム
Develop Produce Distribute
Blockchain による契約の簡素化と
トランザクション履歴のより安全な管
理
28. Cloud-based serverless workflow
speech-to-text, face recognition など
メタデータ
https://customers.microsoft.com/en-us/story/esg-media-telecommunications-azure
「誰もその時点で見ていなかったとしても、私たちが番組に出したい場面を、
それが深夜の1:10 AM にキャプチャされたビデオから秒単位で見つけることができま
す。
これはリソースの大幅な節約になります。
- Lisa Perrin, CEO of Creative Networks at Endemol Shine Group -
29. Legend
Big Brother
Multi-camera
Production
毎分クリップ作成。
その後 Video AI を実行
• Video Analytics
• Audio Analytics
Low-res
Live stream
(RTMP)
High-res
Live stream
5 min MXF segments
Upload
Face Detection
Speech-to-text
Motion
Detection
Logger
サブクリッピング
スティッチング
Cosmos DB
Logic App
Azure
Media Services
Azure Storage
Low resolution flow
High resolution flow
Scene download request
出力
• Output copy
• Asset cleaning
Editor
Live
archive
Azure Media
Services
Encoder
Azure Storage
MXF Broadcast Quality
Video
Logic App
Video AI
Services:
• Face API
• Speech Analytics
MP4 file を
Social Media へ投稿
Import for Editing
Social media
Live Event
32. Language to image synthesis
”A bird with wings that
are blue and a red
belly”
“this bird is red with
white and has a very
short beak”
“A herd of sheep
grazing on a lush green
field”