Какие существуют методы компьютерного зрения для управления роботизированными руками?

Некоторые методы компьютерного зрения для управления роботизированными руками:

• Система Eye-in-Hand. kmu.itmo.ru Камера устанавливается непосредственно на конце роботизированной руки. kmu.itmo.ru Система динамически регулирует угол обзора и обеспечивает высокоточную работу и гибкую реакцию при выполнении задач, таких как динамический захват. kmu.itmo.ru
• Алгоритм визуального захвата. kmu.itmo.ru Манипулятор использует модель глубокого обучения для сегментации RGB-D изображений, что позволяет выполнить пиксельное позиционирование объекта. kmu.itmo.ru Затем с помощью алгоритма оценки позы определяется ориентация и положение объекта, после чего манипулятор осуществляет захват и размещение. kmu.itmo.ru
• Алгоритм OpenPose. nplus1.ru Алгоритм обрабатывает кадры видео в реальном времени и создаёт на их основе двумерную модель тела, состоящую из множества соединённых между собой ключевых точек. nplus1.ru После этого система переносит данные двумерной модели на трёхмерную и отдаёт эти данные планировщику движений робота. nplus1.ru
• Использование глубоких нейронных сетей. kmu.itmo.ru Такие сети, как PointNet, PointPillar, YOLO, FCN, используются для семантического распознавания окружающей среды. kmu.itmo.ru