Ученые из Великобритании представили новую систему, которая умеет определять людей по видео. Она справляется с задачей, даже если нужно найти человека по трем не связанным между собой источникам.

Исследователи из Оксфордского университета разработали систему на основе искусственного интеллекта (ИИ), которая может идентифицировать людей на видеозаписях. Она умеет определять имена и должности людей, исходя из контекста и различных общедоступных источников, включая сопоставление звуковых источников с визуальными материалами из интернета.

Основная задача ИИ — идентификация публичных фигур, таких как люди, появляющиеся в телевизионных программах и фильмах. Но этот принцип теоретически применим к любому человеку, чье лицо, голос или имя появляется в онлайн-источниках.

«Представьте, что вы смотрите видео и встречаете там незнакомого человека. Для того чтобы уверенно идентифицировать его, вы сначала ищете подсказки — титры с его именем и фамилией, другие подписи. Потом вы ищете его имя в интернете. Новый метод ускоряет процесс поиска в несколько раз», — добавили ученые.

Эта методика автоматизирована и исключает любые дополнительные ручные операции по маркировке. Ученые также показали, что система хорошо работает даже в случае, если нужно провести поиск по трем не связанным друг с другом источникам.

Исследователи объяснили, что их ИИ будет особенно полезен во время экспоненциального роста объема немаркированных, непрозрачных видеоданных. Поэтому нужны новые системы, способные извлекать из них информацию о личности без дорогостоящих аннотаций, которые заполняются вручную.

«[Огромный] масштаб данных в сочетании с отсутствием соответствующих метаданных делает индексирование, анализ и навигацию по этому контенту все более сложной задачей. Полагаться на дополнительное аннотирование вручную уже невозможно, а без эффективного способа навигации по видео банк знаний в значительной степени недоступен», — добавили ученые.