Распознавание лица, рук и всяких других объектов в флеш
Поигрался с библиотекой распознавания выделенных обьектов в флеш - FaceIt. Хоть она немного и не доделана, но результат уже впечатляет.
Полная статья с видео и игрой тут: http://vapes.na.by/blog/index.php?en...y101228-151037
Всего комментариев 40
Комментарии
28.12.2010 20:56
|
|
|
Неплохо! Но дальше забавных поделок это все не пойдет, пока flash не получит в распоряжение более качественную картинку с камеры, и в особенности более высокий fps.
|
|
29.12.2010 00:29
|
|
|
а разве дело не в камере? у меня с камеры фпс под 30.... во флэше. ас2.
нда... выглядит круто!... |
|
29.12.2010 00:50
|
|
|
Добавил сайт в закладки
 |
|
29.12.2010 01:04
|
|
|
курто, но сыровато!
попробовал эту либу тоже если вывести объект из зоны камеры, то ловится экзепшен. %) если маркер объекта утерян (когда ты сжал кулак), то при его появлении маркер повторно не находится. повороты объекта ловятся плохо |
|
29.12.2010 01:05
|
|
|
Цитата:
TypeError: Error #1010: Термин не определен и не имеет свойств.
at org.libspark.faceit.utils.bitmap::ImgData$/createFromArray()[/Users/valera/Work/me/FaceIt-0.1(3)/src/org/libspark/faceit/utils/bitmap/ImgData.as:94] at org.libspark.faceit.utils.bitmap::ImgData/getPart()[/Users/valera/Work/me/FaceIt-0.1(3)/src/org/libspark/faceit/utils/bitmap/ImgData.as:125] at org.libspark.faceit.camshift::Tracker/meanShift()[/Users/valera/Work/me/FaceIt-0.1(3)/src/org/libspark/faceit/camshift/Tracker.as:198] at org.libspark.faceit.camshift::Tracker/camShift()[/Users/valera/Work/me/FaceIt-0.1(3)/src/org/libspark/faceit/camshift/Tracker.as:147] at org.libspark.faceit.camshift::Tracker/track()[/Users/valera/Work/me/FaceIt-0.1(3)/src/org/libspark/faceit/camshift/Tracker.as:136] at Recognition/update()[/Users/valera/Work/me/FaceIt-0.1(3)/src/Recognition.as:287] Great Work! |
|
29.12.2010 02:49
|
|
|
|
Цитата:
а разве дело не в камере?
|
|
29.12.2010 06:00
|
|
|
если нужно распознавание только лица, то Marliena пока явно лучше.
но если доведут до ума будет круто =) |
|
29.12.2010 14:53
|
|
|
|
Цитата:
Хм... а есть примеры видео с хорошим fps и не размытым кадром при нормальных движениях?
Разве что снять на экран с видео с камеры на внешнюю видеокамеру.... Но там в общем случае-то тоже муть и гадость будет... |
|
29.12.2010 15:00
|
|
|
|
Цитата:
если нужно распознавание только лица, то Marliena пока явно лучше.
Разве что водителю, заспыпающему за рулем. Но это уже реализовано гораздо проще Я вот сижу думаю - на подушечки пальцев что-нть одеть или покрасить их, чем-нть светящимся, в разные цвета-оттенки, или еще как, и трассировать сразу несколько объектов, тогда как раз можно все это допилить до системы "кибер-перчатки". То есть чтобы интерфейс оперировал не одним единственным маркером - мышиным, а всеми десятью, ну или скажем хотя бы 6-ю пальцами. Тогда можно стоять у iNils`s 30 дюймового монитора и ваять там в стиле "Особое мнение", "Джонни мнемоник" и "Железный человек". Перелистывания, масштабирования, открыть-закрыть, приложить.... |
|
29.12.2010 15:29
|
|
|
неудобно, зато круто?)
|
|
29.12.2010 15:52
|
|
|
|
ну почему неудобно? возьмем к примеру диджейско-микшерский пульт.... мышкой его, мышкой?
|
|
29.12.2010 17:26
|
|
|
|
Цитата:
Кому нужно его собственное лицо, его положение и мимика?
А идея с кибер-перчатками, кстати, занятная. |
|
29.12.2010 17:28
|
|
|
Цитата:
Я вот сижу думаю - на подушечки пальцев что-нть одеть или покрасить их, чем-нть светящимся, в разные цвета-оттенки
|
|
29.12.2010 17:38
|
|
|
|
Вау!!!! ЗДОРОВО!!! А я не знал что такое есть! Ничего нельзя придумать ноовго
кстат ив статье тоже упоминается "Особое мнение" |
|
29.12.2010 17:42
|
|
|
|
Ну у них получилось даже лучше, чем в фильме. В фильме все таки довольно примитивная технология, по-сути ничем не отличается от мульти-тач столов с веб-камерой под стеклом.
|
|
29.12.2010 17:56
|
|
|
Махать постоянно поднятыми руками неудобно и быстро устанешь. На мой взгляд, лучше большой тачскрин на столе, на подобии того, что недавно выпустила Apple.
|
|
29.12.2010 18:02
|
|
|
|
Согласен, но стол не применим когда надо обеспечить манипуляции в объеме или нет возможности приблизиться к поверхности. В случае стола прийдется к нему подходить, а так можно хоть с другого конца комнаты управлять.
|
|
29.12.2010 18:19
|
|
|
|
Цитата:
Согласен, но стол не применим когда надо обеспечить манипуляции в объеме или нет возможности приблизиться к поверхности.
Цитата:
В случае стола прийдется к нему подходить, а так можно хоть с другого конца комнаты управлять.
|
|
29.12.2010 18:34
|
|
|
|
Эта проблема вполне решаема. Например, можно использовать две камеры. Одна (стационарная) будет регистрировать появление и перемещение перчаток, вторая (с зумом) будет на них фокусироваться и отслеживать движение. Хотя это порядком усложняет систему.
|
|
29.12.2010 18:40
|
|
|
|
имхо проблема - одна. в полноценных киберперчатках есть обратная связь ( кажется ).
то есть объект что-то "весит". Тяжелый, упругий и т.п. Просто водить руками по воздуху - это управлять нематериальными проекциями. Например нет реакции - есть касание объекта, или нет. Камеры с зумом для определения дистанции не надо - есть давно ультразвуковые прибамбасы для этого. я даже лет 10 назад видел 3Д мышку - она одевается на палец, как кольцо, а на монитор вешается УЗ рамка. И вот вам 3-е измерение. Но, например, сидеть и верстать журнал, где что-то надо сдвинутЬ .к примеру, такой мышкой на "полпикселя", это нереально. |
|
29.12.2010 18:44
|
|
|
|
Я говорю о том, что размер пальца для вас, будет больше размеров изображения и вам самому будет сложно указать на нужный.
Пример. У меня на обоях есть цветки размеров в 4 сантиметра. С 6 метров, я закрываю указательным пальцем сразу 3 цветка. Есть еще одна проблема. У нас два глаза, поэтому рука перед нами, будет раздваиваться, когда мы будем смотреть на объект расположенный на расстоянии всего лишь 2-х метров. Придется один глаз закрывать  |
|
29.12.2010 18:44
|
|
|
|
В общем отсутствие подобных технологий в масовой эксплуатации свидетельствует об одном - неудобно.
Кстати: Цитата:
Махать постоянно поднятыми руками неудобно и быстро устанешь. На мой взгляд, лучше большой тачскрин на столе, на подобии того, что недавно выпустила Apple.
)) Но - да. Там рука "опирается" на мелок. |
|
29.12.2010 18:46
|
|
|
|
Цитата:
то есть объект что-то "весит". Тяжелый, упругий и т.п.
Для этого нужен полноценный экзоскелет с обратной связью. Самое продвинутое, что попадалось из перчаток предназначенных для бытового использования могло имитировать фактуру. О весе и упругости там речи не было. Сильно дорого получается. |
|
29.12.2010 18:48
|
|
|
|
Цитата:
Пока я вижу в этом проблему, с расстоянием размеры объекта уменьшаются. И палец, который вблизи был в 10 раз меньше картинки, которую мы таскали, на таком расстоянии может уже перекрывать
Идея может быть такая же.Цитата:
У нас два глаза, поэтому рука перед нами, будет раздваиваться,
|
|
29.12.2010 18:48
|
|
|
|
Цитата:
Придется один глаз закрывать
|
|
29.12.2010 18:49
|
|
|
|
Цитата:
Для этого нужен полноценный экзоскелет с обратной связью.
 |
|
29.12.2010 18:54
|
|
|
|
Цитата:
И коллиматорный прицел на палец ставить
|
|
29.12.2010 19:54
|
|
|
|
Цитата:
Видели, как амбал дяд Вася-грузчик, с пальцАми как... мммм..... как краоквские колбаски на айФоне ухитряется правильно набирать номер?
|
|
30.12.2010 04:51
|
|
|
Цитата:
Для этого нужен полноценный экзоскелет с обратной связью.
 |
|
31.12.2010 00:45
|
|
|
Цитата:
Вот это до меня не дошло. У меня же монитор не двоится вот сейчас вот?
|
|
31.12.2010 22:52
|
|
|
|
ну я ж когда в монитор смотрю - на мышку почему-то не смотрю
|
|
31.12.2010 23:49
|
|
|
|
Цитата:
ну я ж когда в монитор смотрю - на мышку почему-то не смотрю
|
|
01.01.2011 12:49
|
|
|
|
На мониторе будет маркер от перчаток. Это и есть курсор.
|
|
01.01.2011 15:18
|
|
|
|
10 курсоров?
|
|
01.01.2011 19:06
|
|
|
|
Диалог становится беспредметным
|
|
02.01.2011 20:34
|
|
|
|
Цитата:
Диалог становится беспредметным
Ты видимо не пробовал управлять бесконтактными контролами.Я пробовал. И тут одно из двух - или курсор лишний и сам контрол должен быть настроен так чтобы вообще не чувствовалось разницы между управлением рукой и управлением "перчаткой". Либо я бездарь и не смог осилить. Оно реально сильно сбивает когда ты вроде как рукой управляешь, но не рукой, и курсора не видно. Но еще больше сбивает если курсор видишь. Ты когда стоишь метра за три от "монитора" (в кавычках, ибо это скорее всего будет проектор а не монитор) - то твое "подвинуть палец на три сантиметра" превращается в "подвинуть курсор на полэкрана" из-за расстояния до камеры, эта самая камера теряется в интерпретации расстояний в пиксели. Управление получается как с очень большой сенсой. Адекватно настроить так и не получилось. В итоге остановились на очень маленькой сенсе + маус_ассел + курсор всё-таки отобразили. Но работало оно далеко не идеально. |
|
02.01.2011 22:56
|
|
|
|
Для удаленного управления котролы должны быть приспособлены. Т.е. никаких кликов, вместо клика использовать "захватить и потянуть". Курсор надо показывать, причем все которые видит камера, хоть десять. Камера должна учитывать расстояние до оператора, что бы управление не превращалось в микрооперации.
|
|
02.01.2011 23:16
|
|
|
|
А я в будущем верю что управление будет "как-бы" пальцем, но на самом деле импульсами из головы. Тут пострадают дети, которые будут пытаться спрятать порно когда будут входить родители. =)
Извините за оффтоп =) |
|
03.01.2011 01:23
|
|
|
|
Какое-либо серьезное применение подобным бесконтактным многоточечным манипуляциям мне видится только при наличии голографического изображения непосредственно под руками. А до тех пор все это баловство не идет ни в какое сравнение с каким-то продвинутым тачскрином типа того же нашумевшего стола.
|
|
03.01.2011 12:40
|
|
|
|
Psycho Tiger, такие разработки уже есть, правда они еще очень далеки от идеала
По сабжу. Определить расстояние от камеры до юзера - можно к примеру, определив размер зрачка (если нет грубой паталогии - оно у всех одинаковое) и сверив в с нормальным значением. Исходя из расстояния вычислить коэффициент поправки для того чтоб движение пальцам на сантиметр не приводило к движению мышки(мышек) на пол экрана. Исходя из положения зрачков также можно вычислить проекцию таким образом, что человек будет тупо елозить по экрану, при этом визуализация собственно мышки и не понадобится. Вопрос только в скорости обработки (скорости получения и обработки видеопотока с вебкамеры.) |
Последние записи от vapes
- BAFPUG revolution! (03.02.2012)
- Встреча BAFPUG в Минске! (24.10.2011)
- BAFPUG "Flash games as business" (18.04.2011)
- Распознавание лица, рук и всяких других объектов в флеш (28.12.2010)
- XML сериализатор (29.11.2010)
