2019 年後半 海外動画技術動向
•
1 like•1,078 views
The presentation is a report on IBC 2019 and Demuxed 2019. It describes BBC R&D's 5G experiments, the roadmap for DVB-I's technology components, next-gen codecs, Google's technical approaches for broadcasting, the evolution of ad insertion technology, browser-based video editing, etc.
Recommended
More Related Content
What's hot
What's hot (20)
Similar to 2019 年後半 海外動画技術動向
Similar to 2019 年後半 海外動画技術動向 (20)
More from Yusuke Goto
More from Yusuke Goto (20)
Recently uploaded
Recently uploaded (9)
2019 年後半 海外動画技術動向
- 1. 2019 年後半 海外動画技術動向 AbemaTV 開発本部 五藤 佑典 IBC 2019 & Demuxed 2019 編 2019.12.17
- 3. IBC 2019 ／ Demuxed 2019 参加 アムステルダム ２０１９年９月１２日〜１７日 サンフランシスコ ２０１９年１０月２３日〜２４日
- 6. 6
- 7. アジェンダ ● BBC Research & Development による 5G 技術検証 ● DVB-I のロードマップ ● 次世代コーデック ● Google の放送事業へのアプローチ ● 広告挿入技術の動向 ● 進化するブラウザベースの動画編集 ● AI x 映像品質管理
- 8. Motivation AbemaTV を始めとするサイバーエージェントの動画事業を技術的に前進させる ● 業界トレンドの定点観測 ● アメリカを中心とする技術標準化の動向キャッチアップ ● 複数の海外パートナー会社との一挙ミーティング ● 業界先端企業の将来への見解や実践例などの情報収集 ● 汎用ソリューションの進化状況の確認 ● 以前に目をつけていた技術の進化状況の確認
- 9. BBC Research & Development による 5G 技術検証
- 10. BBC による 5G 生放送中継実験 背景：UK では Vodafone と EE が消費者向け 5G サービスを開始済 https://www.mirror.co.uk/tech/vodafone-launches-5g-network-uk-17375473
- 11. BBC による 5G 生放送中継実験 5G による生放送中継を本番実験 ● 慎重に条件を選んで実施 ○ 市街中心地 ○ アンテナのすぐ近く
- 12. BBC による 5G 生中継実験 実運用に向けて ● 専用の 5G 回線が必要 ○ Vodafone でも EE でもないパートナーを選択する可能性は十分にある ● 今後 2 年程で実運用する予定
- 13. BBC による 5G スマートツアリズム ● イングランドの観光地 ローマン・バス ○ 保存状態が良い古代 ローマの公衆浴場跡とし て有名 ● 2018 年 12 月 10 日〜 17 日 実施 https://www.romanbaths.co.uk/
- 15. BBC による 5G スマートツアリズム 公衆浴場の復元物上に AR で当時の光景を再現 ● スマートフォン Samsung S8 ● 360° 動画 ● リモートレンダリング ● 60 GHz / 5G メッシュネットワーク ● ローマン・バスとブリストル大学（物理サーバー）間を 10ms 以下で通信
- 17. DVB-I のロードマップ
- 18. DVB-I のロードマップ ● DVB-I Service List ○ 2019 年 11 月 published ● DVB-DASH with a low latency mode ○ 2019 年 6 月 finalized ○ 2019 年 7 月 published ● DVB mABR ○ 2020 年 1 月
- 19. DVB ？ ● 欧州のデジタルテレビ放送の標準規格 ● 放送方式ごとの DVB 規格 ○ DVB-T：地上デジタル放送 ○ DVB-S：衛生デジタル放送 ○ DVB-C：ケーブル放送 ○ DVB-I：インターネット放送
- 20. DVB ？ ● 欧州のデジタルテレビ放送の標準規格 ● 放送方式ごとの DVB 規格 ○ DVB-T：地上デジタル放送 ○ DVB-S：衛生デジタル放送 ○ DVB-C：ケーブル放送 ○ DVB-I：インターネット放送
- 21. DVB-I DVB-I DVB-DASH LL-DASH mABR DVB AV Codecs Signaling / Metadata Service Discovery https://www.slideshare.net/foerderverein/new-media-services-from-a-mobile-chipset-vendor-and-standardization-perspective
- 22. DVB-I Service List インターネット配信と放送によるコンテンツを同一に扱う ● 同じ EPG でグルーピング ● 番組情報取得方式の統一定義 ○ インターネットでも放送によるコンテンツでも同じ UI で番組情報が提供される 検索・発見・ナビゲーション体験の統一
- 23. ● インターネット／地上波／衛生放送 などが同一 UI 上で表示
- 24. DVB-I Service List Content Providers Internet Terrestrial / Satellite Broadcast DVB-I Service Portal Various Devices
- 25. DVB-DASH with a low latency mode ● DVB-I 版の LL-DASH ○ CMAF ○ 放送と同等の遅延（2 秒） ■ 通常の DVB-DASH は 20 秒程 ○ より低遅延は... ■ 視聴環境も相当良い条件が求められる ■ 限られたユースケースのみに求められる DVB では求めない方針
- 26. DVB-I mABR ● Multicast Adaptive Bitrate ● 放送局と通信事業者が協業して IP ベース配信の最適化 ● OTT とケーブル／DTH の良いとこ取り ○ Multicast ○ Managed network ○ High Scalability ○ Multi-screens ○ ABR ○ DRM ● アイデアのオリジナルは castLabs が米国で実装した例からとのこと ○ Broadpeak の nanoCDN multicast ABR を利用
- 27. DVB-I mABR ● Multicast Adaptive Bitrate ● 放送局と通信事業者が協業して IP ベース配信の最適化 ● OTT とケーブル／DTH の良いとこ取り ○ Multicast ○ Managed network ○ High Scalability ○ Multi-screens ○ ABR ○ DRM ● アイデアのオリジナルは castLabs が米国で実装した例からとのこと ○ Broadpeak の nanoCDN multicast ABR を利用
- 29. Broadpeak のソリューション例 Unicast ABR Unicast to Multicast server Operator’s IP network Multicast to Unicast agent Unicast ABR Multicast ABR Packager
- 30. Broadpeak のソリューション例（Mixed） Unicast ABR Packager Unicast to Multicast server Operator’s IP network Gateway w/ Multicast to Unicast agent Unicast ABR Public network Multicast ABR Unicast ABR
- 31. Broadpeak のソリューション例（DTH） Unicast ABR Packager Unicast to Multicast server Satellite Multicast ABR Gateway w/ Multicast to Unicast agent Unicast ABR Unicast ABR Public network Multicast ABR Multicast ABR
- 32. 次世代コーデック
- 33. 次世代コーデック ● LCEVC ● V-PCC ● VVC ● AV1
- 34. LCEVC Low-Complexity Enhancement Video Coding ● コーデックに依存しないコーデック強化 ● n 世代コーデックの符号効率を n+1 世代と同 等に強化 ● n 世代コーデックと同等の複雑性を保ちなが ら ● ソフトウェア実装可能でバッテリー消費が少 ない強化コーデック Guido Meardi (V-Nova) 氏
- 38. 38
- 41. 41 別の (HEVC) の結果では、 PSNR は同じで、 VMAF と MOS で差が 出るパターンも このパターンでは 主観上は明らかに 右の方が映像品質が 高く見える
- 44. V-PCC V = Video-based PCC = Point Cloud Compression ● V-PCC は Point Cloud Comression 向けの始めての MPEG コーデック ● 800,000 points per point cloud frame = 1.5 Gbps
- 45. Point Cloud ?
- 46. Point Cloud の使い道 ● 文化遺産／モデリング ● AR／VR 動画 ● 地図／自動運転車
- 47. Point Cloud の使い道 ● 文化遺産／モデリング ● AR／VR 動画 ● 地図／自動運転車
- 48. Point Cloud の使い道 ● 文化遺産／モデリング ● AR／VR 動画 ● 地図／自動運転車
- 49. Point Cloud の使い道 ● 文化遺産／モデリング ● AR／VR 動画 ● 地図／自動運転車
- 52. リアルタイム V-PCC デコード ● シームレスな MR 体験 ● リアルタイムで 自然なインタラクション ● AR に最適な立体映像
- 53. VVC VVC = Versatile Video Coding ● HEVC の 50% のビットレート 削減を目指す ● 2020 年に finalized 予定 ● Fraunhofer ブースで Live デコードのデモ
- 54. AV1 Google の AV1 ロードマップ ● 2020 Q1 - 4K デコーダー（消費者向け） ● 2020 Q2 以降 - 8K デコーダー
- 55. AV1 のステータス 品質ステータス ● 4K@30fps : Good ● 8K@30fps : Not good 実用ステータス ● 全 YouTube コンテンツのうち 5% が AV1 エンコードされて配信中 要改良
- 57. Widevine CAS ● CAS = Conditional Access System ● Widevine DRM 技術をベースに Android TV に CAS を搭載 ● 放送や OTT 事業者が既存インフラを使用して 安全に Android TV へのリーチ拡大が可能
- 58. Widevine CAS のメリット ● Google が無料提供 ○ 技術使用におけるロイヤルティなし ■ 通常は CAS 使用にはロイヤリティが必要 ○ デバイス使用に費用なし ● 煩雑になりがちなベンダーとの交渉が Google だけでワンストップ ○ SoC ベンダー ○ CAS ベンダー ○ OEM ベンダー ○ ハードウェアベンダー
- 61. Dyanamic Ad Substitution for HbbTV 2.0 後ほど紹介 x
- 62. HbbTV on Android TV Seraphic（上海）の HbbTV ソリューション ● Android 4.4.2 以上 ● HbbTV 2.0.2 サポート ● Linux ／ Android 両プラットフォームの機能をバランス良く最適化 ● 標準の Android Media framework とサードパーティ製のメディアプレイヤーのイン テグレーションのサポート
- 63. HbbTV on Android TV
- 64. HbbTV on Android TV https://www.seraphic-corp.com/Download.aspx?url=2018-06-29/201806291415494796.pdf%7CSERAPHIC_HbbTV_Android_datasheet.pdf&filer=/Upload/File/
- 65. 広告挿入技術の動向
- 66. Dynamic Ad Substitution ● HbbTV 2.0 向けのクライアントサイドでの広告置換 ● 放送による広告枠個別での置換を可能に ○ Google Ad Manager と HbbTV 2.0 の機能を使用してブロードバンドの広告に差し替える ○ 広告チャンス中の任意の広告枠のみ差し替え可能 ● フォールバック ○ HbbTV 2.0 が利用できない受信機ではデフォルトの広告
- 68. Dynamic Ad Substitution デモ PC (DekTec StreamXpress) DekTec DVB-T TEMI (Time and External Media Information) TV 放送と HbbTV 両者で使用可能
- 69. EMSS Enriched Media Streaming Solution 標準化している人
- 70. EMSS = SSAI の標準化 ● アノテーション ● UI ○ カウントダウン ○ スキップ ○ コンパニオン広告 ○ バナー ● ビジネスルール適用 ○ シーク時の強制ビジネスルール ● ビーコン ○ クライアントサイドでのトラッキング ○ アド・ブロッカーの回避
- 71. EMSS コンポーネント ● メタデータの標準化 ● 伝送手法の定義 ● メタデータ処理の普遍化 ● メディアプレイヤーのモジュール ○ UI ○ 設定項目 ○ オーバーレイ ○ インタラクション ○ ビーコン
- 74. Hulu と Ad Insertion ● Hulu は VOD で Client-Side Ad Insertion から開始 ○ サポートデバイスが増えるにつれて Server-Side Ad Insertion に ● Live を始めるにあたって異なる課題にぶつかっている
- 75. 75
- 76. 76
- 77. 77
- 78. パーソナライズド広告のメリット／デメリット ● メリット ○ 広告のセールスフローの単純化 ■ 常に見る広告が決まる ○ 広告体験の一貫性 ● 生配信特有の必要事項 ○ リアルタイムの変更検知（ポーリング） ○ ストリーム内の広告更新の一貫性を守る ストリームで一意に広告を決定する 78
- 81. 81
- 84. Server-Guided Ad Insertion MPEG-DASH の Patch ● サーバーはスティッチングしない ○ 更新情報をどこに取りに行くかガイドするだけ ● コンテンツと広告が分離される ○ スケーラビリティが高くなる ○ 適切な時間管理を必要とする 84
- 85. 85
- 86. 86
- 87. Server-Guided Ad Insertion 標準仕様では MPEG-DASH のみ ● PatchLocation 要素による更新情報ガイド ● 厳格な時間管理モデル 87
- 88. Server-Guided Ad Insertion 課題 ● クライアントで自身の状態を永続化するため クライアント側にスペック依存がある ○ コンテンツの尺が長くなればなる程 負荷がかかる ○ 現時点では 2 割程のユーザーにだけ 適用されている ● MPEG-DASH のみ ○ HLS でも可能だが、標準仕様からは逸脱す ることになるリスク CBS Interactive ミートアップで Hulu の John Schmiederer 氏に話を伺ってみる 88
- 89. 進化するブラウザベースの動画編集
- 90. ● Grabyo ● Vimond IO ● Tellyo ● Bluebird https://about.grabyo.com/
- 91. Grabyo ● AWS 上で動作する Browser-based editing ソリューション ○ エンコーダー ■ AWS Elemental ■ 他のエンコーダーもサポート予定 ○ Automatic Speech Recognition (ASR) ■ Amazon Transcribe? ● Live 編集 ○ インジェスト ■ RTMP / HLS
- 92. Vimond IO ● Live 編集 ○ インジェスト ■ RTMP / HLS ● 出力先サポート ○ Amazon S3 ● 編集機能 ○ 再編成 ○ トリミング ○ 音量キーフレーム ○ グラフィック追加 ○ ボイスオーバー
- 93. Tellyo ● AWS ● Live 編集 ○ インジェスト ■ RTMP / HLS / SRT / RTSP
- 95. Blackbird ● GCP / AWS / Azure サポート ● Live 編集 ○ インジェスト ■ RTMP / HLS / SDI ● File-based ○ 4K サポート ○ ProRes / MXF サポート
- 98. AI x 品質管理
- 99. DeepPerceive Deep Learning から MOS を生成する技術 青色 = フレームレベルの品質スコア｜ オレンジ = 知覚品質スコア
- 100. DeepPerceive Deep Learning から MOS を生成する技術 青色 = フレームレベルの品質スコア｜ オレンジ = 知覚品質スコア 3 回試して 3 回とも自分の主観評価と一致
- 101. まとめ ● 5G によるプロダクションも徐々に現実的なものになってきている ● DVB-I のコンポーネントにより、標準化されたインターネット放送の規格は 従来の放送同等かそれ以上の利便性を身につけてきている ● 既存コーデックと組み合わせるなど次世代コーデックのアイデアは多様 ● パーソナライズド広告挿入技術はスケーラビリティや放送との融合の方向で進化し てきている ● ブラウザベースの動画編集も汎用ソリューションとして実用化している