The RAVE system is designed as a dual agent that uses a
physical robot and a virtual human to engage 6 m to 12 m old
deaf infants in linguistic interactions. The system was
bolstered by a perception system capable of estimating
infant attention and engagement through thermal imaging
and eye tracking. RAVE has been designed for and
experienced by a unique population (deaf infants) during a
three years of observation and the development of three case
studies.
This system has been successful at soliciting infant attention,
directing attention to the linguistic content, and keeping the 
infant engaged for developmentally appropriate lengths of
time. Instances have also been observed of infants copying
robot behaviour, infants producing signs displayed by the
avatar, and infants producing signs that they had observed
the virtual human perform to the non-signing robot agent.
These initial experiences give hope that longer-term
exposure to a system based on this work may be able to
impact long-term learning in this unique population.

Le système RAVE est conçu comme un agent double qui utilise un robot physique et un humain virtuel pour engager des nourrissons sourds âgés de 6 à 12 mois dans des interactions linguistiques. Le système a été renforcé par un système de perception capable d'estimer l'attention et l'engagement du nourrisson grâce à l'imagerie thermique et au suivi des yeux. RAVE a été conçu et vécu par une population unique (les nourrissons sourds) au cours de trois années d'observation et de l'élaboration de trois études de cas. Ce système a réussi à solliciter l'attention du nourrisson, à attirer l'attention sur le contenu linguistique et à maintenir l'engagement du nourrisson pendant des durées appropriées à son développement. Des cas ont également été observés de nourrissons copiant le comportement du robot, de nourrissons produisant des signes affichés par l'avatar et de nourrissons produisant des signes qu'ils avaient observés que l'humain virtuel exécutait sur l'agent robot non-signataire. Ces expériences initiales laissent espérer qu'une exposition à plus long terme à un système basé sur ce travail pourrait avoir un impact sur l'apprentissage à long terme dans cette population unique.

The RAVE system is an integrated multi-agent system
involving a robot and virtual human designed to augment
language exposure for 6 m to 12 m old infants. The system is
an engineered robot and avatar to provide visual language to
effect socially contingent human conversational exchange.
The team demonstrated the successful engagement of our
technology through case studies of deaf and hearing infants.

Le système RAVE est un système multi-agents intégré impliquant un robot et un humain virtuel conçu pour augmenter l'exposition au langage des nourrissons de 6 à 12 mois. Le système est un robot et un avatar conçus pour fournir un langage visuel pour effectuer un échange conversationnel humain socialement contingent. L'équipe a démontré l'engagement réussi de notre technologie à travers des études de cas de nourrissons sourds et entendants.

Facilitating language learning of deaf people