Управление компьютером с помощью жестов. Секретный арсенал Хокинга: управление компьютером с помощью веб-камеры

Кадр из фильма "Особое мнение"

Разработчики продолжают искать новые подходы к управлению устройствами, чтоб сделать работу с компьютерами и смартфонами еще удобнее. TheRunet представляет подборку из 5 гаджетов, которые позволят отдавать команды «легким движением руки».

1. Браслет Myo

Это устройство надевается на руку немного ниже локтя и способно распознать, как сокращаются мышцы. Таким образом, если вы сожмете ладонь в кулак, направите ладонь к себе или от себя, выпрямите все пальцы или сделаете другое движение, Myo распознает его и сможет преобразовать в тот или иной сигнал. Такое устройство может пригодиться для управления музыкой через iTunes (например, если в это время вы заняты уборкой и не можете кликнуть на ту или иную кнопку), видео через Netflix, игрушкой, работающей через Bluetooth, типа Sphera, или презентацией. Для Myo есть несколько десятков приложений, в том числе и для компьютерных игр типа Need For Speed.

В 2013 году браслет получил $14,5 миллионов инвестиций от Spark Capital и Intel Capital. Сейчас его можно купить за $199.У умных часов типа Android Wear есть приложения с похожими функциями, но точность их работы пока далека от идеала.

2. Кольцо Fin

Изображение управления Fin, finrobotics.com

Еще один гаджет Fin для управления жестами сделан в форме другого украшения - кольца. По функционалу он похож на браслет Myo, но использует другие жесты в силу своего формата - основные действия вы можете делать, прислоняя большой палец, на который кольцо и надевается, к фалангам других пальцев. Так можно переключать слайды презентации, музыку и видео, играть, звонить, открывать автомобиль и делать фотографии (это, кстати, одна из самых актуальных функций, которую действительно неудобно делать, нажимая на кнопки, - если речь идет о селфи). Владельцы колец могут делиться файлами, взаимодействуя с руками друг друга.

Fin вызвал ажиотаж при сборе денег через платформу Indiegogo, когда создателям удалось собрать $200 тысяч, вдвое превысив цели кампании. А еще статрап вошел в топ проектов TechCrunch Hardware Battlefield 2014. Правда, кольца еще не продаются, но скоро обещают запуск предпродаж.

3. Перчатки Control VR

Перчатки Control VR, controlvr.com

Если при обычном использовании компьютера набор функций для жестов достаточно ограничен, то в комплекте со шлемом виртуальной реальности гаджеты для считывания движений могут быть более чем уместными. Правда, тут не обойдешься кольцом или браслетом - для полного погружения необходимо считывать движения всего (или почти всего) тела. Поэтому перчатки Control VR для шлема виртуальной реальности Oculus представляют собой скорее целый костюм: гаджет надевается на шею (добавим ожерелье в список наших модных гаджетов), обвивается вокруг предплечий и заканчивается самими перчатками. Использовать его можно в процессе игр и изучения виртуальной реальности, где у пользователя появляется возможность «трогать» предметы и производить другие действия телом - выглядит вполне реалистично, особенно с учетом точного воспроизведения движения пальцев.

Летом прошлого года компании удалось собрать более чем в полтора раза больше планируемой суммы через Kickstarter - $442 тысячи от 1100 пользователей. Судя по странице на краудфандинговой платформе, в марте 2015 появилась первая информация о доставке устройств участникам кампании. Заявленная цена гаджета - $600.

4. Kinect и веб-камеры

Веб-камеры уже давно научились отслеживать в пространстве движения человека. Эта технология используется в игровом контроллере Kinect, c помощью которого устройство улавливает перемещения пользователя и преобразует их в действия в игровом пространстве. Обычная веб-камера по сути тоже способна на подобное, если установить на компьютер программы типа Flutter или NPointer. Чтобы переключать музыку или видео, а также обозначать действия мыши или тачпада без использования этих устройств, нужно делать определенные движения руками и головой.

Возможность подобного управления жестами планировали добавить в функционал Google Glass, делав это устройство еще больше похожим на гаджеты из фантастических фильмов о будущем. Например, хотели сделать жест выделения руками пространства для фотографии или команду «залайкать» понравившийся объект, соединив ладони сердечком. Однако проект был приостановлен вместе с производством самих очков в январе 2015.

5. Устройство Soli от Google

В июне 2015 Google представил технологию Soli. Она использует радар, который способен уловить мельчайшие движения пальцев в воздухе - вплоть до сдвига всего на 1 миллиметр. Поскольку Soli улавливает радиочастотный диапазон, а не считывает информацию через камеру, устройство способно распознать движения объектов, даже если они будут отделены от радара другим предметом (например, другим пальцем). Примером использования Soli стало внедрение радара в умные часы: чтобы настроить время, нужно покрутить воображаемое колесико, как на механических часах. В Google считают, что проект придется по душе пользователям устройств с такой функцией, поскольку небольшие движения пальцами не нуждаются в сверхусилиях и интуитивно понятны: каждый из нас может легко изобразить нажатие кнопки или смещение бегунка при настройке звука.

Впрочем, пока не понятно, планируют ли в ближайшем времени внедрить Soli в часы или другие устройства. Об этом обещали рассказать разработчикам позже в этом году.

В общем и целом управление жестами уже давно не является чем-то
фантастическим. Вопрос вызывает скорее не технология для его реализации,
а уместность и удобство ее использования. Ведь жесты - это далеко не
всегда удобнее простого клика по тачпаду. Как раз эту сторону вопроса в
ироничном виде представили в шутливом ролике Google к первому апреля,
где компания представила выдуманный сервис Gmail Motion.

Компьютерные манипуляторы – как ни удивительно, одна из самых консервативных отраслей. Клавиатура и мышь в практически неизменном виде существуют уже многие десятки лет, и успешно сопротивляются робким попыткам предложить что-то другое – трекболы, сенсорные мониторы, гироскопические манипуляторы и проч. так и не вышли из разряда экзотики, да и не очень пытались. Удастся ли детищу компании Leap Motion, Inc отправить мышь на свалку истории и дать возможность управлять компьютером так, как нам когда-то показывали в Minority Report, или их контроллер так и останется забавной игрушкой?

Комплектация

Поставляется контроллер в небольшой коробке из белого картона, в оформлении которой используются «фирменные» цвета – белый и светло-зеленый. Впрочем, на поверку оказывается, что упаковка могла быть еще меньше – две трети пространства в ней пустует; внутри, кроме собственно миниатюрного устройства, обнаруживается также два USB-кабеля (длинный и короткий) и небольшая информационная брошюра со сведениями о гарантии и т.д. В качестве же инструкции пользователя выступает короткая фраза «для активации контроллера посетите официальный сайт», продублированная на прикрывающей устройство картонке и на наклейке на самом контроллере.

Дизайн

Контроллер Leap Motion оказывается совсем небольшим – «брусок» со скругленными углами размерами 8х3х1 см. Верхняя грань у него из глянцевого черного пластика, боковые грани – из серебристого пластика «под алюминий». Низ полностью прорезиненный, однако по гладкой поверхности стола контроллер скользит достаточно легко. Никаких опознавательных надписей на нем нет (лишь снизу можно найти выдавленный логотип Leap Motion). Сбоку находится разъем USB 3.0 Micro-B, спереди в углу – индикатор активности, светящийся умеренным зеленым светом. В общем, лаконичность во всем.

В работе

Для определения перемещения рук пользователя в Leap Motion используются две монохромные инфракрасные камеры и три инфракрасных излучателя. Камеры «сканируют» пространство над поверхностью стола с частотой до 300 кадров в секунду и передают полученные данные в компьютер, где они обрабатываются фирменным ПО. Несмотря на кажущуюся схожесть с Microsoft Kinect, эти устройства все же отличаются (в Kinect используются цветная видеокамера и датчики глубины).

Leap Motion следует располагать под экраном, точнее – вместо клавиатуры (на самом же деле, поскольку совсем без традиционного управления обойтись не удастся, контроллер придется размещать либо за клавиатурой, либо перед ней, как будет удобнее пользователю). Как следствие, у Leap Motion достаточно малая зона сканирования, в которую попадает, по сути, лишь небольшое пространство над клавиатурой.

После подсоединения контроллера к порту USB (несмотря на то что в самом устройстве используется USB 3.0, его спокойно можно подключать и к USB 2.0) необходимо загрузить программное обеспечение с официального сайта (доступно для Windows, Mac OS и Linux). После его установки пользователь получает оболочку Airspace – в ней объединены собственный магазин приложений Airspace Store, в котором находятся игры и программы, оптимизированные под управление с помощью Leap Motion, и доступ к официальному сообществу. По данным на ноябрь 2013 года, в Airspace Store было уже 150 приложений – часть из них бесплатные, за другие придется заплатить (как правило, в районе $2-5 за программу).

Главное, что следует учитывать перед приобретением Leap Motion – что работа с устройством происходит на уровне отдельных приложений. Другими словами, вы не можете установить системный драйвер, после чего использовать управление руками в любом приложении с той же легкостью, с которой это производится при использовании клавиатуры и мыши. Хотите делать то-то и то-то? There is an app for that, как бы говорят нам разработчики. Другими словами – отправляемся в Airspace Store и ищем подходящее приложение.

Так, наиболее логичный вариант использования, эмуляция управления на уровне системы – это категория Computer Controls, в которой на данный момент находится 16 приложений, которые справляются с этой задачей более или менее удачно. К сожалению, наиболее качественная бесплатная программа в этом разделе – Better Touch Controls – существует только в версии для Mac OS, пользователям же Windows придется довольствоваться гораздо менее удачной Touchless, либо раскошеливаться на платное ПО (максимальный рейтинг у Pointable стоимостью $5).

Разумеется, здесь хватает и казуальных игрушек и «музыкалок» (неплохое впечатление произвела Dropchord), однако всех их хватает максимум на 5 минут, причем не только из-за усталости рук.

В настройках контроллера можно отрегулировать высоту распознавания, в пределах от 7 до 25 см. Угол распознавания составляет примерно +/- 45 градусов.

Управление осуществляется с помощью пальцев (распознаются все 10 одновременно), располагать ладони следует в горизонтальной плоскости – если развернуть их вертикально, точки распознавания пальцев наложатся друг на друга, и устройство будет отслеживать только нижний из них.

Также устройство может плохо различать отдельные пальцы, если они находятся слишком близко друг к другу. Точность распознавания оказывается очень высокой, однако удобство использования очень сильно зависит от качества реализации управления в каждом конкретном приложении – скажем, если крутить глобус в The Weather Channel (крайне упрощенный аналог Google Earth со встроенным прогнозом погоды) оказывается очень даже удобно, то уже попытка вылепить что-то в «симуляторе скульптора» Freeform наталкивается на достаточно серьезные препятствия.

При попытке управления системой с помощью Touchless очень быстро проявилась характерная проблема, с которой сталкиваются все пользователи Windows на системах с сенсорным управлением – элементы Windows слишком мелкие, чтобы в них можно было попадать, тыкая пальцем в touchscreen. А теперь представьте, что сенсорная панель – это невидимая плоскость, висящая в воздухе на расстоянии пары десятков сантиметров от экрана. Конечно, точность отслеживания движения у Leap Motion позволяет попадать если не в пиксель, то уж точно в самые миниатюрные элементы управления на экране, однако тут проявляется «человеческий фактор» — совершать в воздухе микродвижения пальцем вытянутой вперед руки оказывается довольно сложно и весьма утомительно.

В «плиточном» интерфейсе Windows 8 управление было уже более удобным – попасть в большую плитку гораздо проще, чем в маленький ярлык или текстовую ссылку, однако тут тоже были свои проблемы – например, со скроллингом главного меню (вызванные, впрочем, уже не столько особенностями самого контроллера, сколько реализацией управления в программе Touchless).

Говоря о приложениях в общем, нельзя не упомянуть еще один очень показательный недостаток, который как бы намекает нам, что Leap Motion даже не претендует на роль Главного Манипулятора в Системе – закрыть запущенное приложение с помощью жестов рук нельзя; более того, если приложение полноэкранное, то вполне вероятно, что выйти из него удастся лишь по нажатию комбинации клавиш Alt+F4.

Итоги

После знакомства с устройством и его возможностями можно сделать вывод, что на уровне концепта Leap Motion выглядит крайне интересно. А вот конкретная реализация и программная поддержка на текущий момент, к сожалению, опускают пользователя на землю – заменить этим контроллером клавиатуру и мышь и начать размахивать руками перед экраном а-ля Том Круз у него, к сожалению, не получится. Так что пока Leap Motion это скорее любопытная игрушка, которой можно развлечь пришедших в гости друзей… или же необычный новогодний подарок.

Продукт предоставлен интернет-магазином Stylus, stylus.com.ua .

	Leap Motion Уведомить о появлении в продаже
Тип	Устройство виртуального ввода
Описание	Контроллер ваших движений, сделанных кистями рук и пальцами, с его помощью можно взаимодействовать с компьютером непосредственно жестами

Технологии управления устройствами жестами уже давно интересуют разработчиков и пользователей. Достаточно вспомнить Kinect для консолей или приставку Leap Motion для компьютеров. Увы, второму не удалось завоевать популярность и стать достаточно распространенным среди разработчиков, а главное, пользователей. Возможно, начинать нужно с малого и постепенно приучать людей к тому, что движением руки в пространстве можно взаимодействовать с устройствами и управлять приложениями. Этим малым вполне может быть воспроизведение музыки на компьютере силами разнообразных плееров. Взять их по контроль при помощи жестов поможет новое бесплатное приложение ControlAir для Mac. А в будущем компания Eyesight планирует расширить сферу своей деятельности на телевизоры и компьютеры, которые с помощью их технологий смогут понимать гораздо больше жестов и взаимодействовать со многими приложениями.

Итак, ControlAir для Mac предназначен для управления воспроизведением музыки без использования клавиатуры, мыши или тачпада. А список совместимых приложений включает практически все самые популярные плееры: iTunes, VLC, QuickTime, и Rdio. Сразу после установки нужно откалибровать приложение при помощи камеры компьютера, чтобы оно правильно определяло пользователя, а после этого остается лишь пройти небольшой обучающий курс.

Работа с ControlAir предельно проста. Чтобы включить или выключить звук достаточно поднести палец к губам. Весьма очевидный и распространенный жест, надо заметить. Для переключения треков, паузы или регулировки громкости необходимо поднять вверх указательный палец, после чего на экране появится прозрачный интерфейс ControlAir с указанием плеера, который в настоящий момент активен, информацией о проигрываемом треке и кнопками для управления. Движение пальца в стороны позволяет выбирать нужный элемент интерфейса, а нажатие осуществляется сгибанием пальца, будто он нажимает невидимую кнопку. Такая система очень удобна и не требует привыкания.

Единственная проблема ControlAir - пользователю необходимо быть не очень далеко от камеры. Иными словами, управлять музыкой с дивана, пока компьютер стоит на столе, вряд ли получится. Получается, что приложение конкурирует с мультимедийными кнопками на клавиатуре, на удобство которых мало кто жалуется. Впрочем, компания Eyesight пока просто тестирует управление жестами для его совершенствования и улучшения в будущем, так что ControlAir правильней назвать альфа-версией технологии и не судить слишком строго.

Моей радости нет предела — я нашёл очередную неповторимую бесплатную компьютерную программу, которая будет жить в моём компе вечно.

С помощью маленькой программы StrokesPlus я наладил управление компьютером жестами мыши и увеличил в разы. Это была моя давнишняя мечта и вот она сбылась. Кстати, теперь я избавился от ещё одного дополнения в браузерах, а как Вы знаете — любое сети.

Как управлять компьютером жестами мыши

Последний раз я был так счастлив, когда узнал о существовании создателя вкладок в проводнике Windows под названием Clover . Я просто готов скакать по квартире, но эмоции в сторону, беру себя в руки и рассказываю Вам в чём суть StrokesPlus.

Когда-то давно я уже находил программу с похожим функционалом , но она у меня не прижилась, даже не помню по какой причине — кажется она плохо дружила (глючила) с Window 7. StrokesPlus чудно работает с любыми версиями операционной системы Windows, периодически обновляется и потребляет всего капельку .

Программа StrokesPlus

Итак, программа StrokesPlus позволяет управлять компьютером жестами мыши, например Вы можете перемещаться по папкам в проводнике всего-лишь зажав правую кнопку мыши и чиркнув ею вправо или влево. Нет нужды теперь целиться в навигационные кнопочки на панели проводника или тянуться к горячим клавишам на клавиатуре .

Такие же функции выполняет одно из самых популярных дополнений в браузере Mozilla Firefox под названием FireGestures , от которого я без сожаления отныне избавился.

Некоторые пользователи расстроятся, что она на английском языке, но уверяю Вас — абсолютному большинству не понадобится вообще заходить в настройки StrokesPlus. Она сама (после первого запуска) пристроится в автозагрузку системы и предустановленных жестов вполне хватит для комфортного использования её.

Установка и запуск жестикулятора StrokesPlus

Во время установки жмите всю дорогу «Next» и соглашайтесь с лицензией…

После инсталляции программа не запустится сама — её надо запустить «с толкача»…

У меня появилось какое-то полустрашное окно…

…на которое я плюнул и закрыл с помощью «ok». Кстати, может «англичане» подскажут в комментариях, что в этом окне написано? Кажется речь идёт о предоставлении административных прав программе начиная с версии 2.2.1.

Настройка управления жестами мыши

Значок запущенной программы для управления компьютером жестами мыши Вы найдёте в трее (возле часиков). Кликнув по нему правой кнопкой мыши, опытным и любопытным пользователям, можно перейти в настройки («Preferences…»)…

…и переназначить действия на жесты мыши или просто изменить цвет и толщину появляющейся за курсором линии…

…отключить показ которой можно в строке «Show».

Но повторюсь — большинству пользователей нет нужды лезть в настройки вообще. Мне вполне хватает для навигации в проводнике Windows и в браузере…

Как пользоваться жестами мыши

Для моментального запуска поиска Google я рисую букву «G», для сворачивания окон — чиркаю вниз по диагонали справа налево… полный перечень уже действующих в Вашем компьютере жестов Вы найдёте в этом разделе настроек…

Обращаю внимание, что для выделения чего-либо теперь нужно нажать правую кнопку мыши и задержать её на 2 секунды, после чего можно двигать появившуюся рамку выделения.

Самая распространённая ошибка начинающих пользователей в подобных программах — они начинают «чиркать» мышкой сразу после открытия проводника. Господа-товарищи-люди хорошие — программа не умеет читать Ваши мысли и знать наперёд куда Вы хотите перейти. Сперва надо создать историю навигации — зайти в одну папку, затем в другую, потом в третью… и лишь затем начнут работать жесты мыши молниеносно перемещая Вас по проводнику между папками.

Скачать StrokesPlus

Вот официальный сайт программы StrokesPlus , но он на английском языке. Кто не хочет заморачиваться — даю ссылки на скачивание, с него же…

32-bit:

Сочетания клавиш или горячие клавиши являются хорошо известным способом увеличения производительности при работе на компьютере. Мы ранее рассматривали и . Однако бывает, так что ваши руки не на клавиатуре, и вам, развалившись просто лень, тянутся до клавиатуры, но с другой стороны хочется стандартные действия делать побыстрее.

Использование сторонних приложений может дать нам эту возможность – возможность управлять компьютером с помощью жестов мыши.

Загрузка и русификация

Существует много программ для этого дела, я рассмотрю программу Just Gestures (что в переводе означает просто жесты). Скачать можно с официального сайта . Переходите на вкладку DOWNLOAD, выбираете версию под свою операционную систему. И не забываем скачать русификатор, они находятся внизу этой же страницы Language Packages. Просто скачиваем данный файл и после установки программы копируем в директорию
C:\Program Files\Just Gestures\Languages

Интерфейс и настройки

При запуске программы появится мастер настройки, там можно ничего не менять нажать Далее .

Откроется главное окно.Выбираем меню Option , настраиваем язык интерфейса и жмакаем Ok

Теперь в главном окне видим глобальные действия и действия для Internet Explorer . При выделении какого-то элемента слева в окне вы видим жест мышкой, и какие с этим жестом связаны действия. Например, при выделении свернуть окно видим.

Выделяем действие Закрыть Окно и видим что этому жесту, еще соответствует Закрыть Вкладку в IE. Но это не страшно для этого есть настройка приоритетов.

Если приоритет оставим одинаковый. При воспроизведении жеста он программа откроет окно, где можно выбрать какое действие сделать.

Но согласитесь это дополнительные манипуляции, и из-за них теряется сам смысл «быстрых жестов»
Поэтому нужно, и настроим приоритеты. Если мы сделаем приоритет Close Tab для Internet Explorer Выше . То при работе в IE автоматически будет выполняться действие закрытия вкладки, а во всех остальных действие Close Window (Закрыть окно). И никаких лишних манипуляций, все культурно и аккуратно.

Добавление нового приложения

А что если, скажете вы, я вообще не пользуюсь IE? Я отвечу не страшно, программа имеет возможность добавлять новые приложения, и назначать им «горячие жесты». Выбираем Добавить Новую группу Приложений

Нажимаем Выбрать , и указываем путь к приложению. Пишем любое понравившееся имя.

Раз уж там по умолчанию стоит Explorer, но я им не пользуюсь, выбрал для настройки другой браузер Opera. Теперь настало время добавить жесты для оперы, для этого жмем Добавить новый жест. Выбираем категорию действия – Настройка интернета (коль уж настраиваем браузер). Создадим, например жест для Создания новой вкладки. Выбираем использовать этот жест для приложения, и в выпадающем списке выбираем нужное приложение, в нашем случае это Opera!

И Вот тут уже получаем возможность или нарисовать жест самим, левой кнопкой мыши, либо выбрать уже существующий слева. Чуть ниже можно изменить название и дать свое. Также можно назначить не только жесты, но и комбинации нажатия кнопок мыши. Для этого нужно перейти на вкладку Комбинации двойного нажатия. Жмем Далее, назначаем имя и закончить. Все новый жест для управления приложением готов.

Заключения

Программа имеет большой функционал. Разбирайтесь, экспериментируйте и делайте работу за компьютером удобнее и интереснее. Если есть вопросы, пишите в комментах, отвечу. Спасибо!