Как работает алгоритм распознавания касаний при записи видео

Алгоритм распознавания касаний при записи видео работает на основе машинного распознавания образов. vc.ru Он позволяет перевести видеозапись в касания, обнаружив пальцы, дотрагивающиеся до экрана. vc.ru

Процесс включает несколько шагов: vc.ru

1. Отфильтровать цвет кожи и провести бинаризацию изображения. vc.ru
2. Обнаружить контуры. vc.ru
3. Найти два длинных контура — пальца и его отражения — и убедиться, что они пересекаются по горизонтали и что меньший контур находится над большим. vc.ru
4. Установить точку касания в центре линии, по которой соединяются верхушка нижнего контура и низ верхнего контура. vc.ru
5. Отличить касание от зависшего над монитором пальца по длине между двумя контурами. vc.ru

Заключительный шаг обработки данных — преобразование координат точки касания с веб-камеры на координаты на мониторе. vc.ru

Также для распознавания жестов в режиме реального времени при записи видео может использоваться метод Виолы-Джонса. cyberleninka.ru Он позволяет обнаруживать объекты на изображениях в реальном времени и распознаёт их под небольшим углом (примерно до 30 градусов) и при различных условиях освещённости. cyberleninka.ru