Библиографическое описание:Человеко-компьютерное взаимодействие на основе преобразования движения произвольных объектов в видеопотоке : доклад, тезисы доклада / П. В. Пересунько, Е. О. Пересунько. - [Б. м. : б. и.], 2023. - Текст : непосредственный // Ключевые тренды развития искусственного интеллекта: наука и технологии : Международная ИТ-конференция / Ключевые тренды развития искусственного интеллекта: наука и технологии (2023 ; 21.04 - 21.04 ; Москва). - Москва, 2023. - С. 141-147. - ISBN 9785703862032.
Аннотация:Данная работа посвящена задаче управления курсором компьютера. Несмотря на большое количество способов позиционирования курсора, системы с использованием компьютерного зрения позволяют повысить количество способов взаимодействия человек-компьютер. В качестве маркера, с помощью которого перемещается курсор, может быть любой объект, который можно распознать на видео. Особенно остро стоит вопрос управления курсором при ограничениях, в частности, при невозможности совершения человеком определенных действий. Предложенные в работе способы управления курсором могут позволить людям с ограниченными возможностями взаимодействовать с компьютером. Кроме этого, возможность наделять движения способностью управления курсором позволяет мотивировать человека разрабатывать это движение, что, в свою очередь, позволяет геймифицировать процесс реабилитации. Поэтому данная работа посвящена увеличению способов управления курсором компьютера. Для достижения этой цели была предложена система показателей, которая позволяет считывать движения маркеров и переводить их в сигнал для компьютера, в данном случае - в управление курсором. Для примера в предложенной системе в качестве показателя используется угол между векторами. Была представлена схема работы программы. В результате проведен эксперимент, в котором участникам необходимо было решить задачу взаимного постукивания с помощью предложенной программной системы. Опыты показали работоспособность системы. Участники адаптировались к новому варианту управления курсором, постепенно уменьшая время, которое необходимо для решения задачи. Данный эксперимент доказал возможность управления курсором с помощью системы показателей.
The present paper focuses on the challenging task of cursor control. It emphasizes the use of computer vision systems to augment the ways of human-computer interaction. The versatility of these systems lies in their ability to leverage any recognizable object in a video as a marker to move the cursor. The pressing need for cursor control arises particularly in situations where people face certain restrictions in performing motor actions. The proposed cursor control methods hold remarkable potential to facilitate computer engagement for people with disabilities. Furthermore, imbuing movements with cursor-controlled functionality can incentivize individuals to improve motor skills, thereby gamifying the rehabilitation process. The objective of this work is to expand the modes of cursor control. To this end, a marker-based system of indicators was proposed that interprets movement signals to enable cursor control. The system employs the angle between vectors as an indicator, and its scheme was detailed. An experiment was performed to examine whether participants could solve a mutual tapping problem using the proposed software system. The experiment results attested to the system's efficacy, as participants adapted to the new cursor control option, progressively reducing the needed solution time. Overall, the experiment validated the feasibility of cursor control by a system of indicators.
