Всем привет!
Прошу прощение за долгое молчание, но проект скорее всего дальше не будет развиваться, так как я увлекся другим. Если кому-нибудь будет интересно его использовать, я готов выложить наработки как open source на github.
Сейчас я пошел в другом направлении - разговор на свободном языке, вот что получилось:
(
Видео на youtube)
Думаю, истина будет лежать в интеграции этих двух технологий.