Тест MMMU. www.techinsider.ru В нём чат-ботам предлагают решать визуальные задачи университетского уровня, такие как интерпретация нот, графиков и электрических схем. www.techinsider.ru
Испытание с картинками Шолле. digitalocean.ru Разработчик из Google Франсуа Шолле предлагает оценивать «сильный» ИИ по выполнению простых задач, связанных с абстрактным мышлением и способностями к обобщению. digitalocean.ru Для начала показывается пара картинок, связанных простым преобразованием: например, на одной объект показан вертикально, на другой развёрнут горизонтально. digitalocean.ru Компьютер должен разобраться, что за преобразование было использовано. digitalocean.ru Затем ему демонстрируют новую исходную картинку, к которой нужно дорисовать пару, используя то же преобразование. digitalocean.ru
Примеры полезных ответов Поиска с Алисой на вопросы из разных сфер. Вопросы сгенерированы нейросетью YandexGPT для актуальных тем, которые определяются на базе обобщённых запросов к Поиску с Алисой.