Pull to refresh

Comments 126

Удаётся повторить действия героя в исполнении Киану Ривза из «Джонни Мнемоника»?
давно смотрел, не помню что там за действия. посмотрите видео, может быть там есть чтото похожее.
Например, Джонни в буквальном смысле слова разворачивал предметы (пирамиды).
А, такого рода действия. В винде вроде бы 3-д интерфейса нету. а писать «песочницу» ради того, чтобы в ней «брать» предметы и только в ней, нет смысла. но ради интереса можно. только не программировал графику в делфи. не сталкивался
посмотрите на the airmouse, там чуток по другому реализовано. Думаю будет интересно.
Кстати, рука в ней не устает? Все-таки с мышкой рука опирается на поверхность, а так она в воздухе…
я ведь отвечал уже в комментариях. устает рука, согласен, что постоянно на весу. это минус.
К сожалению, современные интерфейсы совершенно не предназначены для работы с подобными девайсами.
Это лишь мышь в виде перчатки. А что Вы имеете в виду под «современными интерфейсами»?
Имеется в виду плоскость. Ее явно не хватает для реализации всех возможностей. Перчатка предполагает возможность двигаться в любом направлении виртуального пространства, причем неограниченно.
Согласен на счет плоскости. была даже мысль положить монитор на стол и попробовать поуправлять так курсором. чтобы ощущения сохранились — рука вперед — курсор вперед и тд.

На счет бесконечности движения не согласен. Движение курсора ограничивается размером экрана и углом обзора веб-камеры.
Для управления перчаткой лучше подошел бы вариант когда камера стоит на месте, а рабочее пространство движется вокруг него, а чувствительность каждый настроит по своему вкусу.
Не совсем Вас понял. Камера и так стоит на месте. Светодиод находится на перчатке. Двигается светодиод, а не камера.
Конечно же имелась в виду камера виртуальная :)
Видео впечатляет. А рука не устает ли?
Устает, на весу постоянно. Предплечье постоянно напряжено. Но привыкнуть можно. На крайний случай ложу руку на стол и вожу как обычной мышей.
Плохо, что напряжено. Не нужно бы привыкать.
Вы когда не снимаете для видео, держите руку ниже стола, на уровне коленей. Так должно быть легче, мне кажется.
Собственно а почему выбран метод именно «на весу»? Помоему очень удобно развалится на кресле, и рукой в перчатке по столу водить, или по чему-нибудь еще твердому, «подергивая» пальцами когда это нужно :)
Тем более, как вариант, можно было бы движения по плоскости отсматривать на модуль веб-камеры, например, а оси пустить уже как 3д движения. Только ИК-подсветку для камеры сделать, чтобы в темноте работала.
ИК-подсветка не нужна, в перчатке есть светодиод. А если поставить три светодиода, можно и ориентацию перчатки камерой отслеживать. И по диоду на каждый палец… Что-то меня занесло, сейчас motion capture изобрету :)
До 6 степеней свободы отслеживает. Если использовать ИК-подсветку и световозвращающие метки, можно сделать полностью пассивную перчатку без проводов и источников питания.
но будет только перемещение курсора. без возможности нажатия клавиш мыши и других действий.
Теоретически, можно разместить на каждом пальце метку, но софт придется дорабатывать, FreeTrack этого не позволяет. И еще FreeTrack предназаначен для отслеживания головы. Рука гораздо подвижнее, и чтобы полноценно махать клешнёй, наверное, придется ставить несколько камер.
Другой путь — наоборот, избавиться от оптического распознавания и делать что-то вроде Nintendo Wii — 3-осевой акселерометр, 3-осевой гироскоп + компас. Такая система, в принципе, может автономно отслеживать все перемещения.
Находил лет 7 назад реализацию такой перчатки в докладе какого-то американского института.
Только там они использовали ее как замену клавиатуре.
Отлично! можно развить идею и сделать пресеты для эмуляции движения руля или джойстика. а чтобы рука была не на весу сделать просто подвижный макет того же руля или штурвала.
Интересно. Кстати, когда я экспериментировал с акселерометром (делал перемещение курсора с его помощью), то как раз и получалось что-то вроде джойстика. Курсор передвигался в сторону наклона акселерометра. Собственно, изза этого и решил для перемещения использовать не акселерометр, а FreeTrack. нужно было именно перемещение перчатки, а не наклон.
Для эффектности нужна плазма вместо монитора. Положить плазму на стол и водить руками над ней.
Все больше хочется положить на стол свой 22 дюймовый асер и попробовать
К сожалению, это видео не доступно в вашем регионе.
Вставили в ролик защищённую копирайтом музыку?
«Ваше видео заблокировано в следующих странах: Germany»
ютуб пишет, что использовал музыкальное сопровождение, принадлежащее такимто таким лицам.
UFO just landed and posted this here
а еще как идея сделать беспроводной интерфейс (что вобщем несложно с помощью радиоканала для rs232) и тогда получится шикарная вещь для управления курсором например двигая им по ноге или подлокотнику кресла :)
Если можно подробней о радиоканале для rs232. Думал для ардуины приобрести модуль блютуз или вай фай. но дороговато чтото.
Этот модуль громоздкий для такого дела и потребляет нехило.
от DRF есть и куда более компактные модули, меньшей мощности.
Это ты мне будешь рассказывать?)
А чего ты людей почем зря пугаешь? Предложил бы им альтернативу.
видел недорогие модули приема и передачи HM-R433 и HM-T433. Читал в Вашем ЖЖ, кажется, про опыт работы с ними. Кучу багов нашли. Вобщем, стоит ли попробовать?
T и R433 это не самый простой для юзания модуль. Это скорей сырой канал которому не помешал бы протокол передачи навертеть сверху.

TR433 получше, но у него крайне глючная и кривая прошивка. Из всех с которыми работал самые клевые, надежные и удобные это RC1240 от Radiocrafts но они дорогие (по 2тыщи за модуль). Еще DRF от Dorj тоже приятные и не глючили. Правда с их софтиной для конфигурации я их подружить так и не смог, работал на дефолтных настройках.
У вас ведь данные передаются только в одну сторону? Берем пару радиомодулей 433 МГц или 2,4 ГГц (самые дешевые — TR-24a). Один из них — передатчик — в перчатке, второй — приемник. Сигнал с приемника через преобразователь уровней MAX232 можно посылать в COM-порт.
Один минус, RS232 есть далеко не везде.
Преобразователи есть на USB с виртуальным ком-портом в системе. Раньше на пролифике были, — тот же PL-2303.
Ocelot, так мой девайс подключается по usb. у ардуино стоит микросхема FTDI usb-com.
Так вообще замечательно. Такую микросхему нужно поставить в приемник, чтобы по воздуху перебрасывать не USB, а RS232 (точнее, UART)
то есть, получается тот же UART по радио? ну это вобще прелесть. спасибо за подсказки!
Да, все упомянутые выше модули (и 90% остальных) в качестве интерфейса имеют UART, уровни напряжения — TTL (5 или 3,3 В)
Данные передаются не в одну сторону. То есть от перчатки идут данные о положении акселерометра и нажатия клавишь. А с компьютера программой можно выключить/включить кнопки, акселерометр и светодиод.
Можно и в одну сторону. Включить/выключить кнопки = просто программно учитывать/не учитывать их состояние. А светодиод пусть горит все время, когда девайс включен…
лучше сделать вкл\выкл на стороне микроконтроллера, потому что не нужно засарять буфер ненужной информацией, если кнопки, акселерометр, светодиод выключен.

Светодиод тоже нужно выключать. потому что иногда неудобно — пока оденешь перчатку, а курсор уже бегает по экрану, потому что фри трэк уже включен. вобщем, я подумал, что лучше контролировать все самому из программы.
В-общем-то, логично. Тогда придется хорошенько продумать протокол обмена данными, т.к. UART — дуплексный канал, а радиомодули работают попеременно на прием или передачу. Есть полудуплексные модули, которые сами управляют потоком, но они дорогие, дешевле тогда уж будет bluetooth использовать.
Я понимаю. То есть ситуации, когда одновременно со стороны контроллера и со стороны компьютера идет передача данных, возникать не должно.
Те же беспроводные мыши все (за редким исключением) используют односторонний канал.
Перезалейте картинки на другой хостинг т.к. «интесивность запросов изображения превысила лимит»
Как варианты: habrastorage, rghost, imageshack.
Первого вполне достаточно.
Никто ещё не упоминал?

Если кто не знает, то фильм называется «Особое мнение».
И Джонни Мнемоника умудрились позабыть.
Первое, что пришло в голову при виде этих перчаток.
«Газонокосильщик 2» вспомнился
Рука. да. хватает собрать пару пазлов в игре количеством 60 штук )
Это же хайтек-тренажёр. Теперь не будет повода говорить о малоподвижной работе.
Делайте «ногу». :)
Гантельку на пол-кило или даже на три подвесить и начать с одного подхода по 10 пазлов. Постепенно увеличивать и за недельку банки на руках раскачаешь так, что потом по экрану будешь двигать как в невесомости.
Ещё бы к этой штуке DIY-Kit — я бы заказал…
+ api под разные платформы.

Этот девайс как вспомогательный хорошо подошёл бы, в дополнение к мышке в некоторых случаях. В Google Earth на видео — обалденно!
Собственно, идея возникла благодаря Google Earth)
На Sun Tech Days была одной из самых популярных игрушек — перчатка + SunSpot.
Управлять непривычно и немного глючно (особенно убивало то, что движения вверх и вниз были перепутаны /* по крайней мере мне всегда хотелось наоборот двинуть */).
Ей бы фидбек — чтобы при «хватании» обьекта перчатка не давала сдвинуть пальцы больше, чем на толщину этого обьекта. Классно было бы.
Хотя бы не фидбек, а для начала аналоговые датчики сгибания палицев вместо дискретных кнопок.
Была идея использовать «датчики изгиба» или мелкие ползунковые резисторы. но не того ни того в местом магазине радиотоваров не было.
Можно посмотреть в сторону дифференциальных трансформаторов. Их довольно просто изготовить самостоятельно, в т.ч. миниатюрные (мотайте на стержне от шариковой ручки). К помехам не чувствителен, точность — отличная.
Из обвязки понадобится генератор синусоиды (нес-ко килогерц), усилители, ФНЧ (это все на операционниках можно сделать), АЦП.
Хотя, можно несущую генерировать контроллером, и АЦП там встроенный должен быть.
АЦП встроенный 10-ти битный присутствует. забыл указать в описании платки. поправлю.
UFO just landed and posted this here
Картинки по 1Мб размером 2500×1900 — смысл? Уменьшите их, пожалуйста.
Если Вы посмотрите на скриншоты программы внимательно, то там есть функция «выключить клавиши». Выключив клавиши можно спокойно печатать двумя руками, после чего опять включить клавиши перчатки. Так же можно вызвать экранну клавиатуру, которая стандартная, и имеется в любой виндовс системе.
UFO just landed and posted this here
Arduino nano — 150 грн + 20грн доставка
Акселерометр — 38 грн + 20грн доставка
5 микропереключателей — 15 грн
Перчатки — 50 грн
Ткань «липучка» — я взял полметра тонкой и толстой — 9грн
ИК — светодиод — не знаю цену, был у меня.
Проводники, резисторы, конденцаторы, фольгированный текстолит — не знаю сколько, все это было в наличии.

итого 302 грн
UFO just landed and posted this here
В конце статьи есть ссылка. Пропустили.
Ваша фраза про «не удержался» звучит особенно двусмысленно =)
ви не поняли. это таки его перчатки
Рука устает, опускаете руку ниже облокачиваясь локтем на колено, и манипулируете вверх-вниз, и тут заходит мама…
Выглядит клево, но думаю, что стоит двигаться в сторону оптического распознания жестов(Kinect).
Классно. Как обошли багу руки когда «кликаешь» мизинцем, безымянный тоже сгинается?
Посмотрите на фото перчатки. Там регулируется «порог срабатывания» клавиши. Это достигается путем приклеивания провода-тяги дальше/ближе по длине пальца. На мизинце и безымянном пальцах чуть «отпустил» провод-тягу. Вобщем, это регулируется, это учтено )
… мы с папой вытравили эту маленькую платку дома. После чего я подключил его к МК и экспериментировал с ним.
Я думал, эксперименты над людьми запрещены (:
папа мягкий, он простит
Много лет назад меня посещала идея использовать подобные перчатки в качестве составной части тренажёра печати на клавиатуре. Цель же тренажёра заключается в том, чтобы нужными пальцами нажимать на нужные клавиши. Но программно это же никак не отследишь. А с помощью подобных перчаток понятно, каким пальцем произведено нажатие. Всё, теперь программная часть может как-то реагировать, на то, что пользователь нажал клавишу не тем пальцем.
UFO just landed and posted this here
Для того, что Вы говорите, можно использовать и один 3х осевой акселерометр. НО, в моей перчатке передвижение отрабатывает не акселерометр, а веб-камера и программа FreeTrack.

Проблема с акселерометрами: это датчики ускорения. то есть как бы Вы решили, например удерживание нажатой левой клавиши мыши? клик — запросто. но удерживание? ведь Вы провели руку в сторону монитора, ускорение произошло, но тут же исчезло. это клик. удерживание не получится. (получится, но опять же, только при наклоне. так он физически устроен)

Управляющие жесты: в моей программе они присутствуют. Но минимальные. Т.е. наклоны вправо, влево, вперед и назад. На скриншотах и на видео видно, как я назначаю действия на клавиши и на действия акселерометра. При чем действия эти связаны с окном. Так как это упрощает, на мой взгляд, работу с окнами вобщем. То есть не нужно передвигать курсор на «крестик», «свернуть», «максимизировать». На мой взгляд это удобно.
Чтобы ускорение (которе измеряет акселерометр) преобразовать в координаты, нужно дважды проинтегрировать. Но тут проблема в том, что из-за погрешностей координаты будут «плыть»: акселерометр неподвижен, а система думает, что он медленно куда-то едет.
Если интегрировать один раз, получим скорость. С ней уже проще, ошибки не так сильно накапливаются, но все равно накапливаются.
Наклоны хорошо обрабатываются акселерометром, но только когда перчатка неподвижна. Если мы хотим измерять угловое ускорение, нужен гироскоп (три — по трем осям). Но у гироскопа та же проблема: данные с него нужно интегрировать, а значит углы наклона тоже будут «плыть». Для контроля неподвижности по осям крена и тангажа достаточно использовать акселерометр (куда смотрит вектор g, там низ). А вот для задания нуля по оси рыскания это не поможет, и обычно используют магнитный компас (и пусть он показывает не на север, а на ближайшую батарею, главное, что все время в одну и ту же сторону).
Если хотите все это реализовать, ищите материалы по ключевым словам «фильтр Калмана», на хабре тоже полно статей на эту тему.
«Фи, в него руками играть надо. Старьё какое» (с) Назад в Будущее.
Здорово, конечно, особенно для DIY. Но будущее, ИМХО, за нейроинтерфесом.
ждем от вас похожего топика про нейроинтерфейс на коленке. разрешаю использовать arm
Это просто офигительно!
Уже в домашних условиях стали делать такие крутые девайсы. Не знаю как вы, но у меня почему то складывается ощещение, что будущее стремительно приближается.
меня стошнило от платы. извините, я не специально. все остальное отлично
Автор, а возможности Вашего устройства позволяют его использовать при 3d-проектровании? Как, например, продукция конторы CyberGlove Systems. Это вполне себе отрасль. Допилите свою штуку и на рынок
Сегодня пробовал крутить модели в ArchiCad и «строить» стены. Довольно неплохо.
Карты в руки! Изучите вопрос с позиции бизнеса
Если доработать интерфейс, точность позиционирования и поднять чувствительность. То можно изготовлять такие перчатки — носки(на ноги) для людей инвалидов.
При существующих интерфейсах ее область работа на ноутах не за столом и работа с трехмерными объектами (google earth впечатлило). Конечно довести реализацию до тонкого непромокаемого варианта, плюс использовать перчатки с обрезанными пальцами (тогда ее хоть постоянно носи) и вполне бизнес решение, покупать на ура будут, сначала гики, а когда будет разработано достаточно библиотек под нужные программы то и обычные и профессиональные пользователи. Правда функцию отключения перчатки (перчаток) и переход в режим виртуальной клавиатуры нужно очень хорошо продумать, это должно делаться очень просто и быстро, иначе даже затылок не почесать :) (просто руки контролировать постоянно сложно, они постоянно делаю множество неосознанных действий, жестов), поэтому действие включение перчатки должно быть не сложнее чем руку на мышь положить.

Ну а когда появятся действительно трехмерные экраны и интерфейсы то решение точно найдет применение. С помощью рук можно отдать на много больше команд чем мышью и это гораздо естественнее.
По-моему, самая большая проблема подобных девайсов в сложности переключения состояния активен — не активен. С мышью просто — лежит на столе — курсор не движется, клавиши не нажимаются. Необходимо придумать концепцию простой и быстрой активации-деактиващии таких девайсов. Чтобы — вот печатаем, — щёлк, — уже управляем мышью, щёлк (и при этом курсор НЕ СДВИНУЛСЯ относительно последнего положения), опять печатаем (или пьём чай).

Есть идеи?
Мои:
1. Педаль для ноги (недостатки — дополнительные провода, ноги у меня в процессе работы как только не складываются и тд. чтобы оценить недостаток можно попробовать пошить что-нибудь на бытовой швейной машинке с педалькой).
2. Двойное моргание глазами :). Из достоинств — дополнительная польза для зрения :).
на данном этапе можно выключить кнопки перчатки поставив галочку в меню программы. включить уже только мышью.
> Сегодня я хочу поделиться с вами своим, не побоюсь этого слова, достижением. Я сделал необычную мышь. Это манипулятор в виде перчатки, имеющий 5 клавиш и акселерометр.

… не побоюсь этого слова — БАЯН! Погуглите

Помню у нас на кафедре уже где-то в 2007 проект дипломный копипастили на эту тему. В чем Ноу-Хау?
Как ассист в тренеровке боксеров мышка с акселерометрами может прокатить: измерение силы удара. А для комфортной работы без дрожаний и с нормальным быстродействием — наврядли на дешевых ширпотребовских датчиках выйдет.
прочтите статью от начала и до конца. это не мышка с акселерометром. акселерометр выполняет совсем другую функцию. а перемещение за счет веб-камеры и светодиода инфракрасного. все это написано в статье.
и посмотрите видео, ссылка на которое тоже присутствует. там четко видно, что курсор перемещается от перемещения кисти руки, а не от ее наклонов. нет никаких дрожаний. у меня, правда, руки трясутся, но это чисто физический аспект. у большинства руки не дрожат на весу. на счет быстродействия скажу так — 30 кадров в секунду распознавания веб-камерой положения светодиода с головой хватает для комфортной работы перчаткой как мышью.
> заменит ролик мыши
Точно… Извините. Был неправ. Надо переставать делать категоричные выводы на ночь глядя.
Не дороговато ли вместо ролика аксель использовать? Где-то 220+ руб.
Я считаю, что это удачное решение и оно того стоит.
Смотря в каком плане «удачное». Дорогое решение будет продаваться покупаться либо если будет обладать очень востребованным и уникальным функционалом, либо хорошо разпиаренное.
«Во вкладках «эмуляция мыши» такие функции: ЛКМ, СКМ, ПКМ, прокрутить ролик вверх/вниз. Во вкладках «Действие с окном» такие функции: переместить окно, закрыть окно, свернуть окно, максимизировать/восстановить окно.» — опять же написано в статье.

Акселерометр использовать можно не только как ролик мыши. На наклон акселерометра в любую из сторон можно повесить те действия, которые я привел выше.
Sign up to leave a comment.

Articles