BelBES Feb 17 2013 at 16:54

Детектирование ладоней и пальцев на изображении

3 min

34K

Algorithms*Image processing*

+43

Comments 28

sankir Feb 17 2013 at 18:34

Я с ужасом жду того дня, когда в инструкциях придется писать что-то типа «для активации %действия% вам нужно скрутить пальцы фигой и высунуть язык на левую сторону».
Хотя ситуации когда «для администрирования сервера необходимы навыки карате не ниже зеленого пояса» будут весьма забавны.

+13

samodum Feb 17 2013 at 18:57

Если людям будет неудобно пользоваться такими средствами управления программами, то они естественным образом уйдут в небытие.
Опасаться нечего

sankir Feb 17 2013 at 19:14

Как показывает практика, многие из неудачных решений успевают внедрить и заставить по пользоваться ими, до того как они уйдут в небытие.

Gero Feb 17 2013 at 22:29

Капча же пока никуда не ушла, хотя и страшно неудобно.

logan Feb 18 2013 at 17:17

Уйдет, как только придумают лучший способ верификации. А пока что его нет.

biblos Feb 18 2013 at 13:58

Смотря видео www.gmail.com/motion все же опасаюсь, что недалек час новых интерфейсов :)
ибо как говорят, в каждой шутке есть только доля шутки!

dxRang Feb 17 2013 at 19:09

Содержимое директории «Налоговая отчетность 2002-2013» было перемещено в корзину. Для восстановления данных встаньте на колени, сложите перед собой руки и поклонитесь три раза

… или показал Винде непристойный жест, а она тебе диск Д форматнула в отместку :)

+15

qwertyhp Feb 17 2013 at 22:55

Полагаю, все будет куда интереснее: Вы сидите за компом, а комп тем временем отслеживает ваше состояние. И сверяет его со своей базой, после чего реагирует соответствующим образом. Например, если Вы улыбаетесь, то раздается негромкий серебряный звон колокольчиков, как бы поощряя Вас к продолжению этого состояния: если Вы хмуритесь, то на экран вылезают смешные персонажи из мультиков, и т.д. Что касается именно управления, то более вероятно развитие голосового управления — совмещенное с системой искусственного интеллекта, оно превратит комп в полноценного собеседника и советчика (т.к. по мере общения с Вами он сможет контекстным образом в том числе искать инфу в Сети и анализировать ее), и сделает его
Вашим симбиотом. Как, например, Ваш любимый смартфон сейчас.
А Вы представляете, что еще совсем недавно были времена, когда из всех развлечений в поездках и на отдыхе самым доступным была
собственная голова!? :)

BelBES Feb 17 2013 at 23:07

Вот голосовое управление под большим сомнением. Таже Siri или Google-поиск с голосовым вводом что-то не очень в ходу. А не в ходу вероятно из соображений приватности — не так много людей хотят посвящать всех окружающих в свои дела. А вот управление при помощи контролов видимых в дополненной реальности(в тех же очках Google Glass) выглядит вполне перспективно как элемент управления «на ходу»(вернее для тех случаев, когда доставать полноценную клавиатуру не удобно), когда надо например сориентироваться по карте.

biblos Feb 18 2013 at 14:06

Не скажу за поиск, но на мой взгляд, проблема решений типа Siri в том, что они cloud based и требуют Интернета (при чем качественого ), что весьма проблематично для многих мобильных пользователей.

SEOVirus Feb 22 2013 at 06:49

На моём голосе Google-поиск работает не очень хорошо :) И говорю ему чётко, и голос, вроде как, обычный. Хотя и распознаётся неплохо 2 слова из сказанных 3-4, но всё-таки написать запрос бывает быстрее, чем исправлять за ним то, что он написал :)

Lol4t0 Feb 17 2013 at 19:21

А можете видео записать?

BelBES Feb 17 2013 at 19:36

Да, конечно. Добавил в статью видео с примером работы.

kinguru Feb 17 2013 at 19:50

На видео отчетливо видно, что определение очертаний пальцев все время дрожит и гуляет.

-1

BelBES Feb 17 2013 at 20:05

Дрожания можно объяснить тем фактом, что для увеличения скорости работы я обхожу не все точки контура, а точки с некоторым шагом(на видео я обхожу каждую 20 точку контура) и при этом в каждом кадре заново ищутся контура + поиск точек, и вполне логично что в разных кадрах мы по разному обходим контура и вероятность попасть два раза в одну точку вообщем-то не велика. Плюсом к этому идет довольно «нечестный» Depth Map с Kinect'а из-за которой происходят довольно неслабые гуляния самих контуров в некоторой окрестности.

BelBES Feb 17 2013 at 20:12

UPD: Вообщем-то по видео стоит судить скорее о справедливости идеи в принципе, а не о «гуляниях» точек(хотя колебания тоже в пределах нормы, т.к. колебания происходят в малой окрестности истинной точки).

amorphius Feb 17 2013 at 22:08

Откуда первый рисунок? Фильм какой-то?

BelBES Feb 17 2013 at 22:09

Особое мнение

DmitryBabokin Feb 17 2013 at 23:57

Если не секрет, для чего решалась эта задача? Просто для фана, по работе, по учёбе?

BelBES Feb 18 2013 at 00:10

Just for fun) Ну и возможно потом где-нибудь еще пригодится эта штука.

Lol4t0 Feb 18 2013 at 00:24

По-моему, вам осталось сделать так, чтобы эта штука представлялась сенсореным экраном — ну еще сгладить рывки усреднением — и можно пускать в массы.

BelBES Feb 18 2013 at 00:40

Не думаю, что все так просто) Я тут решаю довольно простую задачу на плоскости, а для комфортного управления жестами(да и вообще для того, чтобы это имело смысл) хорошо-бы провести полную 3D-реконструкцию положения рук и пальцев в пространстве.

Lol4t0 Feb 18 2013 at 01:04

можно же ограничить некоторую глубину, с которой считывать, и решать задачу на плоскости. Я думаю, владельцам Kinect даже такая реализация, как на видео, была бы интересна.

nefelim4ag Feb 18 2013 at 01:58

Очень круто *_*
А если серьёзно, то это действительно попахивает каким-то сенсорным управлением, тогда встаёт вопрос с вебкой, как я понял тут разрешение камеры имеет малое значение, т.е. вебка ноутбука должна потянуть.
Дальше надо просто сообразить как связать это с системой, для начала даже связать это с мышью будет уже круто.
типо пальцев в стороны перетаскивать курсор.
а раздвигая 2 указательных пальца или сдвигая увеличение и уменьшение (или аналог прокрутки).

Я конечно не сильно разбираюсь в программировании и связи с системными действиями, но разве за счёт проверки смещения относительно предыдущей точки нельзя проследить движение и как сказано выше усреднением сгладить скачки.
Большой шаг, как я понимаю вы брали для уменьшения нагрузки на процессор, интересно насколько она меняется и насколько она большая при такой обработке.
Я понимаю что предлагать и реализовывать разные вещи, во мне просто говорит ребёнок, потому что это выглядит как фантастика

BelBES Feb 18 2013 at 17:56

Нагрузка на процессор на самом деле очень низкая, у меня в среднем контура имели длину 800-1500 точек каждый, математика там довольно легкая используется для каждой точки, поэтому получал real time с большим запасом.