Live_dumb 2 Жалоба Опубликовано September 20, 2012 Привет всем! Мне необходимо разработать программу которая распознает мимику лица. Существует множество шаблонов мимики и следует проверять соответствует ли мимика человека шаблону. Подскажите пожалуйста какие технологии следует использовать в этом случае. 1 Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Smorodov 579 Жалоба Опубликовано September 20, 2012 Соотнести шаблон с данными - это не очень большая проблема. Решается при помощи SVM, регрессии, нейросетей и т.д. всего что способно учиться. Подаем на вход шаблон - на выход эмоцию, если обучающих пар достаточно, то система обучится. Более сложной задачей будет точно снять биометрические параметры. Хотя, если вы можете использовать кинект, то http://www.compvision.ru/forum/index.php?showtopic=926&st=0&p=6683&hl=microsoft&fromsearch=1&#entry6683 думаю то, что Вам нужно. Либо посмотрите тут: http://www.compvision.ru/forum/index.php?showtopic=15&st=80 ,но это не особо гибкая моделька. Есть еще в этой теме (AAM): http://www.compvision.ru/forum/index.php?showtopic=411 Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
mrgloom 242 Жалоба Опубликовано September 20, 2012 google-> emotion recognition проанализировать подходы или найти готовые решения Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Live_dumb 2 Жалоба Опубликовано September 20, 2012 Такая схема подойдет? http://www.compvision.ru/forum/index.php?showtopic=112&st=80&p=3235&hl=%D1%80%D0%B0%D1%81%D0%BF%D0%BE%D0%B7%D0%BD%D0%B0%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5%20%D0%BB%D0%B8%D1%86%D0%B0&fromsearch=1&#entry3235 Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Smorodov 579 Жалоба Опубликовано September 20, 2012 Попробовать можно, но не думаю что будет работать лучше чем при использовании "маски", скорее заметно хуже. Эта схема позволит распознать разных людей, но нужны-то эмоции, а эмоции это расстояния между вполне определенными точками лица (см. MPEG4 FAPs), а не наличие одинаковых кусочков изображения (дескрипторов) которые разные у разных людей. PS: Думаю что Вам будет интересна книжка "MPEG-4 Facial Animation: The Standard, Implementation and Applications" И это посмотрите: http://xface.fbk.eu/ Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Live_dumb 2 Жалоба Опубликовано September 20, 2012 На русском есть что-нибудь? Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Smorodov 579 Жалоба Опубликовано September 20, 2012 Есть ГОСТ слизанный с ИСО, больше почти ничего. http://vsegost.com/Catalog/30/305.shtml Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Live_dumb 2 Жалоба Опубликовано September 20, 2012 А программа которую вы выложили подойдет?(правда чет не запускается она) http://www.compvision.ru/forum/index.php?showtopic=15&st=98 Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Smorodov 579 Жалоба Опубликовано September 20, 2012 Я уже сказал выше что "маска" здесь жестковата. Чувствительность будет маленькая. А что пишет, когда отказывается запускаться? Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Live_dumb 2 Жалоба Опубликовано September 20, 2012 ft2build.h не находит, что это за библиотека и где скачать всю "пачку" сразу, на сайтах файлы разбросаны. Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Smorodov 579 Жалоба Опубликовано September 20, 2012 Это FreeType 2, его вроде оттуда можно безболезненно вырезать. Просто забыл удалить. Это для вывода текста ttf шрифтами. Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Live_dumb 2 Жалоба Опубликовано September 20, 2012 в файле asm.cpp идентификатор не найден: cvCreateSubdivDelaunay2D cvSubdivDelaunay2DInsert cvSubdiv2DEdgeOrg cvSubdiv2DEdgeDst cvClearSubdivVoronoi2D Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Smorodov 579 Жалоба Опубликовано September 20, 2012 Они переехали в legacy.hpp Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Live_dumb 2 Жалоба Опубликовано September 20, 2012 Запустилось. Только сразу после запуска вылетает окно с ошибкой "Запуск программы невозможен, так как на компьютере отсутствует opencv_legacy242.dll" Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Smorodov 579 Жалоба Опубликовано September 20, 2012 ну так надо эту дллину кинуть в папку с экешником, и вообще все длл которые попросит или прописать пути к длл в PATH. Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Live_dumb 2 Жалоба Опубликовано September 20, 2012 Как я понял на вход нужно подать объект типа cvMat предварительно получив его при помощи конвертера из объекта типа .asm, а что это за тип? Объясните пожалуйста Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Smorodov 579 Жалоба Опубликовано September 20, 2012 asm - это модель активной формы (записанная в формате STASM (софтины с открытым кодом, но работающей заметно хуже этой програмки)). Русской литературы по этой теме очень мало, можете почитать немного здесь: http://cgm.computergraphics.ru/content/view/75 В общем случае, формирование новой модели занятие очень трудоемкое, да и не особо нужное, т.к. эта технология вряд ли даст намного более хорошие результаты. Если коротко, то это статистическая модель. Среднее (среднее лицо) и матрица ковариации небольшого количества собственных векторов (пространство в котором лицо может меняться). Эта статистика получается путем обработки нескольких тысяч фотографий, на которых вручную выделяют характерные точки. Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Live_dumb 2 Жалоба Опубликовано September 21, 2012 Не могу понять что надо надо на подать на вход программы. Опишите пожалуйста более подробно свою программу. Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Smorodov 579 Жалоба Опубликовано September 22, 2012 Программе нужны файлы: Каскад Хаара: \data\haarcascade_frontalface_alt2.xml Модель лица: bin\Mask1.dat Изображения лица идут с камеры. Обработки отсутствия лица в кадре не делал, поэтому при запуске программы, лицо уже должно быть перед камерой (иначе маска свернется в точку). Вроде больше ничего не нужно. Что у Вас происходит при запуске, что выводится в консоль? Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Live_dumb 2 Жалоба Опубликовано September 22, 2012 Нарушение прав доступа при чтении, думаю это из-за того что я не подаю на вход файлы) Где взять каскад Хаара и модель лица? Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Smorodov 579 Жалоба Опубликовано September 22, 2012 они в архиве. Запустите под отладкой, посмотрите на чем падает. Немного более современная версия той-же программы: ASMModel.zip Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Live_dumb 2 Жалоба Опубликовано September 23, 2012 В режиме отладки не запускается, пишет "Не удается найти отладочную информацию для main.exe или не найдено соответствие". При запуске без отладки появлялась ошибка "Нарушение прав доступа при чтении" , посмотрел с каким файлом это связано, opencv_core242d.lib. Зашел в свойства и в доп. зависимостях поменял на opencv_core242.lib(без d) Все запустилось, правда работает ужасно из 20 запусков пару раз нашлось мое лицо а потом сетка убежала, в остальных случаях она по стене бегала) Чем отличается библиотеки с "d" в названии и без нее? Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
kilop 7 Жалоба Опубликовано September 23, 2012 собственно d - значит для debug Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Smorodov 579 Жалоба Опубликовано September 23, 2012 Эта программа, сделана для статических картинок, с камерой она работает, так: 1) ищет лицо 1 раз Хааром. 2) инициализирует модель. 3) апдейтит модель. Если модель сползает, то программа не пытается ее восстанавливать. Чтобы работало лучше, нужно проверять корректность детекта, и периодически реинициализировать трекинг (собственно из трекинга там только апдейт модели, а этого явно недостаточно). Причем, если фон у Вас за спиной имеет много граней, то программа будет еще чаще срываться. Я делал более устойчивый вариант, с добавлением оптического потока, и наложением геометрических ограничений, но этот вариант - монстр, имеющий много зависимостей, в котором сложно разобраться. Из альтернатив можете попробовать FaceAPI, для некоммерческого использования он бесплатный, но вроде бы там есть ограничения. Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах
Live_dumb 2 Жалоба Опубликовано September 24, 2012 Инициализация метод InitModel? А про более устойчивый вариант можно поподробнее? Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах