Какие эксперименты проводятся с использованием искусственного интеллекта для анализа видеозаписей?

Некоторые эксперименты с использованием искусственного интеллекта для анализа видеозаписей:

• Исследование MIT и Университета штата Пенсильвания. www.securitylab.ru Учёные хотели оценить потенциал использования ИИ в домашних камерах видеонаблюдения. www.securitylab.ru Для эксперимента выбрали три модели: GPT-4, Gemini и Claude. www.securitylab.ru Им предоставили набор видеозаписей из социальной сети Neighbors, созданной компанией Ring. www.securitylab.ru Перед ИИ ставили два ключевых вопроса: «Происходит ли преступление на видео?» и «Следует ли вызвать полицию?». www.securitylab.ru

Результаты показали непоследовательность в работе ИИ. www.securitylab.ru Например, при просмотре видео с попытками взлома автомобилей модели в одних случаях определяли это как преступную деятельность, а в других — не находили ничего подозрительного. www.securitylab.ru

• Исследование компании Trassir и института Airi. habr.com Цель работы — создание систем, которые помогут расследовать кражи в магазинах. habr.com В ходе исследования использовали мультимодальные модели в zero‑shot‑режиме, то есть без дополнительного обучения на специальных данных. habr.com

• Разработка сервиса Expert. dzen.ru Сервис на основе искусственного интеллекта, который позволяет анализировать видеоролики и выявлять дипфейки — видео, синтезированное с помощью ИИ. dzen.ru Система оценивает различные параметры: уровень внешней и внутренней агрессии персонажа, его уверенность, противоречивость, а также конгруэнтность информации (согласованность вербальных и невербальных сигналов). dzen.ru