井上尚弥の世界タイトルマッチ、NECの映像認識AI等による実証を実施

井上尚弥の世界タイトルマッチ、リアルタイムでハイライトシーンを自動生成 NECの映像認識AIなどによる実証を実施

2024.09.05 19:52
井上尚弥の世界タイトルマッチ、NECの映像認識AI等による実証を実施

ドコモの映像配信サービス・Leminoで、9月3日に独占無料生配信されたNTTドコモ Presents Lemino BOXING ダブル世界タイトルマッチ」の“井上尚弥選手vsTJ・ドヘニー選手”。同試合の映像について、AIなどを活用した「ハイライトシーンのリアルタイム自動抽出と要約文章の自動生成および投稿」の実証実験が行われた。

井上尚弥の世界タイトルマッチ、NECの映像認識AIなどによる実証を実施

Leminoで生配信した「NTTドコモ Presents Lemino BOXING ダブル世界タイトルマッチ 井上尚弥vsTJドヘニー」のストリーミング映像で、NEC(日本電気株式会社)の映像認識AIとLLM(大規模言語モデル)を組み合わせ、ハイライトシーンの抽出と要約文章を自動で生成。

本実証用に準備されたSNSに、抽出されたハイライト映像・画像と生成された要約文章を配信した。またラウンド毎に特徴的なシーンの抽出と、ダイジェスト文、さらに各選手の動きに焦点を置いた説明文を作成。ラウンド間のインターバル中に配信を行った。

ハイライト抽出及び要約文章生成にはデータ活用基盤ソリューション「NEC Multimedia OLAP」を活用。ストリーミング映像に対して、複数の認識AIを用いたマルチモーダル分析手法により、リアルタイムにハイライトシーンを多角的に抽出した。

それらのシーンを基に、LLMを活用することで、臨場感ある表現や特定の選手に焦点を当てた描写など、多様な視点でストーリーが感じられる要約文章の生成を実施。SNSでリアルタイムに試合状況を把握することが可能になるため、ユーザーが場所やシーンを選ばず、より手軽に臨場感あふれる情報を入手し、楽しむことができる。

さらに本技術では、利用者からの指示を元に該当するシーンを要約した映像や文章の生成が可能に。今後は運営側での配信負担軽減のみならず、ユーザーが求める臨場感のあるハイライトシーン投稿を自動生成するサービス開発などへの活用を目指すという。

関連リンク

関連記事

  1. 新垣結衣が語りに!“伝説の家政婦”タサン志麻さん夫婦に密着「たくさんの人の心にスッとしみこむはず…」<ふたりのディスタンス>
    新垣結衣が語りに!“伝説の家政婦”タサン志麻さん夫婦に密着「たくさんの人の心にスッとしみこむはず…」<ふたりのディスタンス>
    WEBザテレビジョン
  2. 東京03の超絶サクセスストーリー 全国ツアーだけで「1年食えるくらいはもらえる」
    東京03の超絶サクセスストーリー 全国ツアーだけで「1年食えるくらいはもらえる」
    WEBザテレビジョン
  3. <BLACKPINK>「あつまれ どうぶつの森」内に“BLACKPINK島”がオープン!MVのセットやステージを再現
    <BLACKPINK>「あつまれ どうぶつの森」内に“BLACKPINK島”がオープン!MVのセットやステージを再現
    WEBザテレビジョン
  4. 松井玲奈、大粒の涙…新型コロナ感染中の思い吐露「人生の中では一番苦しいぐらいの数日間」
    松井玲奈、大粒の涙…新型コロナ感染中の思い吐露「人生の中では一番苦しいぐらいの数日間」
    WEBザテレビジョン
  5. ジャニーズWEST中間淳太 “探偵”イメージの細身スーツで「小説現代」表紙に!推しミステリから自身の創作活動まで明かす
    ジャニーズWEST中間淳太 “探偵”イメージの細身スーツで「小説現代」表紙に!推しミステリから自身の創作活動まで明かす
    WEBザテレビジョン
  6. 瀬戸朝香、“なかなか良い感じ”7歳長女によるメイクSHOTに反響「優しくて自然な感じすごくいい」「娘さんお上手!」
    瀬戸朝香、“なかなか良い感じ”7歳長女によるメイクSHOTに反響「優しくて自然な感じすごくいい」「娘さんお上手!」
    WEBザテレビジョン

「ニュース」カテゴリーの最新記事

  1. 腹筋バキバキ!大島璃乃、4年前とのグラビア比較画像が話題!!「鍛えられた身体が進化していて、尊敬します!」「なんだ、努力する女神か」
    腹筋バキバキ!大島璃乃、4年前とのグラビア比較画像が話題!!「鍛えられた身体が進化していて、尊敬します!」「なんだ、努力する女神か」
    WWS channel
  2. ミルク感たっぷり!小倉あずさ、牛コスプレにファンメロメロ!「たすかるw」「似合いすぎ最高」
    ミルク感たっぷり!小倉あずさ、牛コスプレにファンメロメロ!「たすかるw」「似合いすぎ最高」
    WWS channel
  3. 神尾楓珠、“最近涙したこと”を明かす「楽しかったなぁ、と思って」
    神尾楓珠、“最近涙したこと”を明かす「楽しかったなぁ、と思って」
    WEBザテレビジョン
  4. 山本裕典、“歌舞伎町ホスト”として再臨するもあえなく撃沈「知名度はあるけどホスト力はない」
    山本裕典、“歌舞伎町ホスト”として再臨するもあえなく撃沈「知名度はあるけどホスト力はない」
    ENTAME next
  5. 道端アンジェリカの今に密着、自分を追い込みすぎた20代を激白「7年間生理が止まっていた」
    道端アンジェリカの今に密着、自分を追い込みすぎた20代を激白「7年間生理が止まっていた」
    ENTAME next
  6. 日下部ほたる、むっちり美爆乳あらわなスノーマングラビアでファン魅了!!
    日下部ほたる、むっちり美爆乳あらわなスノーマングラビアでファン魅了!!
    WWS channel
  7. 桜田ひより、神尾楓珠と「コミュニケーション取れるかな?って不安だった」
    桜田ひより、神尾楓珠と「コミュニケーション取れるかな?って不安だった」
    WEBザテレビジョン
  8. 日南まみ、美くびれあらわなコスチューム姿にファン悶絶!!「サイコーにカワイイっす」
    日南まみ、美くびれあらわなコスチューム姿にファン悶絶!!「サイコーにカワイイっす」
    WWS channel
  9. 中居正広さんをめぐるトラブル フジテレビが弁護士による調査開始 週刊誌報道は否定
    中居正広さんをめぐるトラブル フジテレビが弁護士による調査開始 週刊誌報道は否定
    ABEMA TIMES

あなたにおすすめの記事