Human Robot Interaction based on dialogs

dialogs

Description

La interacción humano robot por voz está basada en algunos pilares básicos como son:
– El reconocimiento automático de voz.
– La síntesis automática de voz.
– La localización de la fuente sonora.
– La identificación del hablante.
– El gestor de diálogos (manager).
Actualmente estamos usando un reconocedor de voz basado en gramáticas (Loquendo) y otro de lenguaje abierto (Google ASR). Sobre ellos hemos desarrollado “habilidades” capaces de trabajar de manera coordinada con la Arquitectura de Control AD. Es de vital importancia para la interacción por voz el desarrollo de un sistema de reconocimiento: preciso, de respuesta rápida y capaz de trabajar en ambientes con ruido. 
El sistema de síntesis de voz, está basado en una habilidad capaz de gestionar locuciones,siendo capaz de mantener una cola en memoria, secuestrar la voz, liberarla, callarla etc. Para ello nos hemos basado en tres sistemas: Loquendo, Festival y Google TTS. Mediante estos tres sistemas somos capaces de hablar con emociones, con control de velocidad, con gestos sonoros (como risas, silbidos, lloros, etc) y en mas de 35 idiomas diferentes.
En cuanto al sistema de diálogo, en la actualidad estamos trabajando con un sistema de huecos de información (VoiceXML) pero estamos en estudio con nuevos sistemas, por ejemplo basados en modelos estadísticos como pueden ser los: POMDP.
Recientes campos de desarrollo e investigación abiertos nos llevan a la Generación de Lenguaje Natural basándonos en gramáticas o templetes.

Entries:
Sensorless Friction and Gravity Compensation
IEEE RAS International Conference on Humanoid Robots (Humanoids 2014), 2014, Madrid, Spain
S. Morante Juan G. Victores S. Martinez
Control Practices using Simulink with Arduino as Low Cost Hardware
ACE2013 – The 10th IFAC Symposium on Advances in Control Education , 2013, Sheffield, UK
J. Crespo R. Barber
Design and Implementation of Software Components for a Remote Laboratory
7th International Technology, Education and Development Conference, 2013, Valencia, SPAIN
J. Crespo R. Barber
An Approach on Remote Laboratories using Matlab Web Server and Easy Java Simulations
6th International Technology, Education and Development Conference., 2012, Valencia, Spain
M. Malfaz C.A. Monje R. Barber
Adaptive Control of a Pneumatic System for Educational Practices
The 8th International Technology, Education and Development Conference, 2014, Valencia, Spain
J. Crespo R. Barber S. Garrido D. Rofriguez
A Home Made Robotic Platform based on Theo Jansen Mechanism for Teaching Robotics
The 10th annual International Technology, Education and Development Conference, 2016, Valencia, Spain
A. C. Hernández C. Gómez J. Crespo R. Barber
Object Classification in Natural Environments for Mobile Robot Navigation
IEEE, International Conference on Autonomous Robot Systems and Competitions (ICARSC), 16th edition, 2016, Braganza, Portugal
A. C. Hernández C. Gómez J. Crespo R. Barber

Entries:
RoboCity16 Open Conference on Future Trends in Robotics
chapter: Object Perception applied to Daily Life Environments for Mobile Robot Navigation pages: 105 – 112. Consejo Superior de Investigaciones Científicas Madrid, España , ISBN: 978-84-608-8452-1, 2016
A. C. Hernández C. Gómez J. Crespo R. Barber

Previous Research topics

next Research topics

Projects

Robots

Robot types & applications