Child-Robot Interaction: Learning by Imitation using Motion Generalization

O trabalho insere-se numa parceria entre o Instituto de Sistemas e Robótica (ISR) e a Associação de Paralisia Cerebral de Coimbra (APCC), para desenvolver a interação entre robôs e as crianças da associação.

O sistema junta o robô NAO, um computador e o sensor de profundidade Kinect RGB-D, ligados pelo Robot Operating System (ROS). Deteta utilizadores, aprende movimentos de braços ensinados por uma pessoa, reproduz no robô os movimentos dos braços do utilizador, reconhece movimentos e comunica por comandos de voz.

No modo de imitação o robô imita o utilizador; no modo de aprendizagem o utilizador ensina novos movimentos e, quando um movimento ainda não é conhecido, o robô pede para o repetir até o aprender e generalizar. As capacidades foram testadas com adultos e crianças, primeiro uma a uma e depois em interação contínua.