新研究：AI技術でカメラ操作の妨害排除しライブサッカー放送を向上させる

TokyoKTU（カウナス工科大学）の研究者たちは、AIを活用してライブサッカー放送を向上させる新しいシステムを開発しました。このシステムは、カメラマンが互いのショットに偶然映り込むことによる視覚的な妨げを取り除くことを目指しています。こうした問題は、視聴体験を損なうだけでなく、放送局にとっての収益損失にもつながる一般的な課題です。

リティス・マスケリューナス教授とそのチームは新しい技術を開発しました。彼らは、物体検出において優れた性能を発揮するYOLOv8モデルを用いたシステムを構築しました。YOLOv8は高速かつ高精度であり、特にサッカーの生中継のようなライブイベントに最適です。

技術の主な特徴は以下の通りです。YOLOv8モデルを用いた物体検出、ビデオインペインティング技術、リアルタイム処理、そして没入感のある視聴体験を提供します。

最近KTUでコンピュータサイエンスの人工知能修士課程を修了したSerhii Postupaievは、YOLOv8をトレーニングするためのデータセットを作成しました。このデータセットには、試合中の異なる状況におけるさまざまなサイズのカメラマンやさまざまな機材が写っている画像が含まれています。YOLOv8はこのデータセットを用いて、ビデオフレーム内でカメラマンを見つけ出します。

モデルがカメラマンを検出した際、システムはビデオインペインティング技術を利用します。この技術は、画像やビデオの欠けている部分を修復したり埋めたりするものです。AIはこれらの隙間を背景の詳細と一致する情報で補完し、変更が自然に見えるようにします。更新されたフレームは観客に送信されます。このプロセスは数秒で完了しますが、依然として「ライブ放送」とみなされます。

関連記事:

2024年11月21日 · 10:27

米国がAI革新で中国を凌駕、スタンフォード報告書が示す

この技術により、視聴体験がよりスムーズで質の高いものになります。視聴者はもはやカメラマンが誤って映り込むことはなくなるでしょう。これにより、注意がそれず、試合の重要な瞬間を見逃すことが少なくなります。マスケリウナス教授は、機材が進化することで、AIがタイミングを完璧に処理できるようになると考えています。

この分野の将来の研究は、スポーツのテレビ観戦に変革をもたらすかもしれません。放送がより魅力的で連続的なものになる可能性があります。新しいカメラアングルやエフェクトにより、サッカーの試合がよりエキサイティングになることでしょう。この技術は、試合前後の分析やハイライト映像、過去の試合の映像にも活用されると考えられます。

このシステムはサッカー以外にも、フットサルやバスケットボールなどのスポーツに利用できます。この技術を使用することで、放送会社は新しいスポーツイベントの見せ方を試すことができるようになります。

ポストゥパイエフ氏によると、現代のAI技術は多くの産業に影響を与えています。ライブ放送で不要な物体を除去することに加えて、広告を差し替えたり、コンテンツを正確に更新したりすることも可能です。これにより、新たな収益源が生まれ、視聴者の満足度が高まります。

KTUの研究者たちは、この新しい技術がスポーツ中継をよりプロフェッショナルで楽しいものにすると考えています。