最新情報

ドコモ、推しの映像をAIが自動編集 11月に音響連動デモ

記事のイメージ:NTTドコモは10月23日、視聴者が指定した「推し」のアップ映像とステージ全体の見どころをAIで組み合わせるライブ映像自動構成技術を発表した

NTTドコモは2026年10月23日、視聴者ごとの好みに応じてライブ映像を自動で組み立てる「パーソナライズ映像自動構成技術」を開発したと発表した。好きな出演者のアップだけを映し続けるのではなく、ステージ全体の演出や他の見せ場も取り込み、視聴者に合わせた映像を作ることを目指す。一般向け配信サービスの開始ではなく、研究開発段階の技術発表だ。

推しとステージ全体をAIが自動で切り替え

音楽ライブの配信では、全視聴者が同じカメラ映像を見る形式が一般的だ。複数カメラから選べるマルチアングル方式もあるが、視聴中に自分で切り替える操作が必要になる。推しのアップを追いかけると、舞台全体の演出や別の出演者の重要な場面を見逃す可能性もある。今回の技術は、この操作負担と視聴体験の偏りを減らす狙いがある。

仕組みの中心はVLM(Vision Language Model)と呼ばれる、映像などの視覚情報と言語情報を扱えるAIモデルだ。視聴者があらかじめ注目したい出演者を設定すると、AIがその人物のアップ映像とステージ全景の映像を組み合わせる。カメラを手動で頻繁に切り替えなくても、個人の好みとライブ全体の見どころの両方を反映できるという。映像の自動構成に関する具体的な精度や処理遅延の数値は公表されていない。

11月に音響XRと組み合わせたデモ

同社は11月18~20日、24日、25日にNTT武蔵野研究センタで開催予定の「NTT R&Dフォーラム」で体験デモを展示する。NTTが開発する音響技術「音響XR」と組み合わせ、映像だけでなく音声にも視聴者の好みを反映する。発表によると、特定の出演者の歌声を強調したり、出演者の立ち位置に合わせて音が聞こえる方向を制御したりする体験を想定している。

例えばグループの音楽ライブなら、推しの歌声を聴き取りやすくしながら、その出演者のアップとグループ全体のパフォーマンスを組み合わせて視聴できる。映像の選択と音響の調整を連動させる点が、単にカメラを選べる従来の配信との違いだ。ただし、デモの展示予定が明らかになった段階であり、実際の商用配信でどこまで自由に設定できるかは未発表となっている。

スポーツやXRへの応用も検討

今後の応用先としてドコモは、音楽ライブ以外にスポーツ観戦やXR・ARグラスを使った視聴体験を挙げる。例えばスポーツでは、注目選手の映像と試合全体の状況を両立させるような使い方が考えられる。ただし、これは発表された研究の応用可能性に基づく例であり、具体的なサービス化や導入先が決まったという意味ではない。

ドコモはさらに、多数の利用者へ個別に構成した高品質な映像と音響を低遅延で届ける将来像を示し、6G時代の大容量・低遅延通信も視野に研究を進めるとしている。視聴者ごとに異なる映像を生成・配信するには、制作工程だけでなく配信基盤の設計も重要になる。現時点では提供開始日、料金、対応する配信サービス、利用できる端末などは公表されていない。

みんなの反応

55件
  1. 推しのアップと全景を両方見られるのは助かる

  2. これ実現したらライブ配信の楽しみ方が変わりそう!

  3. 自分でカメラを切り替えなくていいのが一番ありがたい

  4. グループ全員を見たい人向けの設定も欲しいな

  5. 推しだけ映し続ける仕様じゃないのはいいね

  6. 音声まで好みに合わせられるのは面白い

  7. 歌声の強調って実際どれくらい自然なんだろう

  8. 現地のライブとはまた違う楽しさがありそう

  9. まずは11月のデモ映像を見てみたい

  10. AIが見せ場を判断する精度が気になるところ

  11. カメラマンの仕事がなくなるって話ではないよね

  12. 複数のカメラがある前提なら設備費も気になる

  13. 推しが急に動いたときも追えるのかなw

  14. ステージ全体の演出も残す発想はかなり重要

  15. 個別映像の配信って通信量がすごそう

  16. 6Gの用途としては分かりやすいかもしれない

  17. 音響XRとセットで体験できるのが楽しみ

  18. スポーツ中継でも推し選手を追えたら便利

  19. 切り替えのタイミングが不自然だと酔いそう

  20. 視聴者ごとに編集内容が違うってすごい時代

  21. 演出家の意図したカットも見たい派です

  22. 公式の固定カメラ映像も選べるようにしてほしい

  23. ライブ配信のアーカイブでも使えるのかな?

  24. 好きなメンバーが複数いる場合はどうなるんだろ

  25. 音の方向まで変わるのはヘッドホンで試したい

  26. 声だけ強調すると楽曲のバランスは崩れない?

  27. まずは大人数のライブでどこまで動くか知りたい

  28. 技術デモと実際の商用サービスは別の話だね

  29. 配信プラットフォームへの導入時期が気になる

  30. スマホでも負荷なく視聴できるなら便利そう

  31. 推し活と映像AIの組み合わせは相性よさそう

  32. どの場面を見せ場と判断するのか気になるな

  33. 客席からの映像も混ぜられたら面白いかも

  34. AI編集の設定を細かく保存できると良さそう

  35. 全景を自動で挟んでくれるなら見逃しが減りそう

  36. 舞台照明の変化もちゃんと捉えられるのかな

  37. 歌声の強調はライブ音源好きには賛否ありそう

  38. マルチアングル操作が面倒だったので期待してる

  39. 配信者のソロライブだとどう活用するんだろう

  40. VTuberの3Dライブにも応用できそうで気になる

  41. 出演者ごとに専用の配信を作る感覚なのかな

  42. 配信遅延がどれくらい増えるのか知りたい

  43. AIが勝手にズームしすぎないといいけどw

  44. カメラ切り替えを自分で決めたい人もいるはず

  45. 映像と音の組み合わせで没入感が変わりそう

  46. 視聴者が指定する推しの情報はどう扱うんだろ

  47. 将来はスポーツの推し選手追跡にも期待!

  48. 技術の説明は面白いけど料金次第かな

  49. デモ会場で比較視聴できるなら行ってみたい

  50. 推しの声を強調できるって結構新鮮だな

  51. 観客の歓声も残してほしい派なんだけど

  52. ライブの一体感が損なわれないなら歓迎

  53. この技術は音楽フェスでも便利そう

  54. ステージ全体の演出を見逃さないのが大事

  55. 個別最適化しすぎて共通の話題が減る可能性も

情報元

#NTTドコモ #VLM #パーソナライズ映像自動構成技術 #ライブ配信 #音響XR

同じ話題の記事

共通するタグが確認できる記事を、公開日の古い順に掲載しています。

あなたもコメントする ↓

JOIN THE CONVERSATION

あなたはどう思う?

コメントは投稿後すぐに公開されます。個人情報や不適切な内容は投稿しないでください。

コメント

まだコメントはありません。