Новая система искусственного интеллекта теперь может смотреть футбольные матчи, определять ключевые моменты и даже комментировать их, как это делают люди-комментаторы.
Технология была разработана исследователями из Шанхайского университета Цзяо Тун и Alibaba, которые создали её на основе самой большой из когда-либо собранных коллекций футбольных видеозаписей.
Их набор данных под названием «SoccerReplay-1988» включает почти 2000 полных футбольных матчей из высших лиг Европы и Лиги чемпионов за период с 2014 по 2024 год. Это более 3300 часов игровых видеозаписей со средним количеством 76 комментариев на матч.
Исследователи использовали этот массив данных для создания MatchVision, которая, по их словам, является первой универсальной системой для анализа футбольных матчей. Её особенностью является способность выполнять несколько задач одновременно — от отслеживания игровых событий до создания естественного комментария, учитывающего происходящее на поле.
Система может распознавать 24 различных типа игровых событий, включая голы, фолы и тактические ходы, такие как смена владения мячом. При анализе фолов MatchVision изучает видео с нескольких ракурсов, чтобы определить тип фола и его серьёзность.В таблице показано, как MatchVision определяет ключевые моменты матчей и генерирует комментарии для каждой сцены.
В ходе испытаний MatchVision достиг 84-процентной точности в определении игровых событий. Команда утверждает, что он превзошёл существующие системы не только в определении игровых моментов, но и в составлении комментариев и определении нарушений. Они планируют сделать набор данных и модель доступными на GitHub.
Одно интересное открытие показывает, как AI и комментаторы-люди фокусируются на разных аспектах игры. В то время как AI, как правило, сосредотачивается на технических деталях и тактических ходах, комментаторы-люди с большей вероятностью улавливают эмоциональный накал игры и дают более широкий контекст.Параллельные примеры сравнения того, как комментаторы-люди (GT) и AI описывают три ключевых момента матча — спорную жёлтую карточку, последовательность угловых ударов и гол.
Исследователи считают, что их работа представляет собой значительный шаг вперёд в области автоматизированного спортивного анализа. Заглядывая в будущее, они предполагают, что система может помочь автоматически создавать обзоры игр или помогать судьям, опираясь на существующие технологии искусственного интеллекта, которые уже используются для таких вещей, как определение положения «вне игры».
Источник
Источник новости: habr.com
