Как функционирует Live-режим в приложениях умных помощников?

Возможно, имелся в виду Live-режим в приложении «Алиса» от Яндекса. dzen.ru yandex.ru

В этом режиме Алиса распознаёт объекты, показанные ей через камеру смартфона, и рассказывает о них пользователю. dzen.ru yandex.ru Например, можно гулять по городу, наводить камеру на здания и расспрашивать о них Алису. dzen.ru yandex.ru Или показать ей набор продуктов и спросить, что из них можно приготовить. dzen.ru yandex.ru

Общение в Live-режиме происходит голосом, что позволяет в живом диалоге уточнять детали. dzen.ru yandex.ru История диалога сохраняется в чате, где можно продолжить разговор. dzen.ru yandex.ru

Режим работает на базе мультимодальной нейросети Яндекса (Visual Language Model, VLM). dzen.ru habr.com