Google навчила смартфони відстежувати жести

Компанія Google опублікувала алгоритм, який з високою точністю відстежує рухи руки користувача на основі зображення, одержуваного з камери смартфона.

Розробники вважають, що рішення дозволить реалізувати на мобільних пристроях нові функції, наприклад, розпізнавання жестової мови або жестових команд. Подробиці про алгоритм компанія розповіла у своєму блозі. На початку алгоритм аналізує кадри з камери та виявляє на них руку, після чого працює тільки з потрібною областю, що значно знижує необхідну обчислювальну потужність.

Під час роботи алгоритм створює модель руки, що складається з 21 точки, яких достатньо для точного опису положення кінцівки в конкретний момент. При цьому програмне забезпечення може працювати у двох режимах: в одному воно створює двовимірну модель руки, а в іншому — тривимірну.

Читайте также:   Податок на роботів — це стандартний прояв робофобії

На основі алгоритму розробники також створили систему розпізнавання жестів: отримуючи модель руки, рішення аналізує кути між частинами пальців і зіставляє їх з базою відомих йому жестів. Для навчання алгоритму розробникам довелося створити власний датасет з приблизно 30 тисяч кадрів, на кожному з яких була вручну розмічена модель кисті.

Для сторонніх розробників алгоритм доступний на GihHub, причому адаптований він для роботи на обох основних мобільних операційних системах: Android і iOS. Користувачі Android також можуть встановити собі два демо-додатки, одне з яких створює двовимірну модель руки, а друге малює тривимірну модель, яка відображатиме відносну відстань до кожної точки кисті. Для iOS доступні інструкції по збірці проекту в Xcode.

Читайте также:   Поезд прямиком к Азовскому побережью

Не успеваете всё читать ?
Подпишитесь на рассылку Financoff.
Самое важное и интересное из
сегодняшних новостей вам на почту.

Это бесплатно.




Нет комментариев

Напишите комментарий

Your email address will not be published. Required fields are marked *