Mask-Bot: A Robot With a Human Face ScienceDaily (Nov.

7, 2011) Robotics researchers in Munich have joined forces with Japanese scientists to develop an ingenious technical solution that gives robots a human face. By using a projector to beam the 3D image of a face onto the back of a plastic mask, and a computer to control voice and facial expressions, the researchers have succeeded in creating Mask-bot, a startlingly human-like plastic head. Yet even before this technology is used to give robots of the future a human face, it may well soon be used to create avatars for participants in video conferences.

The project is part of research being carried out at CoTeSys, Munich's robotics Cluster of Excellence. Mask-bot can already reproduce simple dialog. When Dr. Takaaki Kuratate says "rainbow," for example, Mask-bot flutters its eyelids and responds with an astoundingly elaborate sentence on the subject: "When the sunlight strikes raindrops in the air, they act like a prism and form a rainbow." And when it talks, Mask-bot also moves its head a little and raises its eyebrows to create a knowledgeable impression. What at first looks deceptively like a real talking person is actually the prototype of a new robot face that a team at the Institute for Cognitive Systems (ICS) at TU Mnchen has developed in

collaboration with a group in Japan. "Mask-bot will influence the way in which we humans communicate with robots in the future," predicts Prof. Gordon Cheng, head of the ICS team. The researchers developed several innovations in the course of creating Mask-bot. The projection of any number of realistic 3D faces is one of these. Although other groups have also developed three-dimensional heads, these display a more cartoon-like style. Mask-bot, however, can display realistic three-dimensional heads on a transparent plastic mask, and can change the face on-demand. A projector positioned behind the mask accurately beams a human face onto the back of the mask, creating very realistic features that can be seen from various angles, including the side. Many comparable systems project faces onto the front of a mask -- following the same concept as cinema projection. "Walt Disney was a pioneer in this field back in the 1960s," explains Kuratate. "He made the installations in his Haunted Mansion by projecting the faces of grimacing actors onto busts." Whereas Walt Disney projected images from the front, the makers of Mask-bot use on-board rear projection to ensure a seamless face-to-face interaction. This means that there is only a twelve centimeter gap between the high-compression, x0.25 fisheye lens with a macro adapter and the face mask. The CoTeSys team therefore had to ensure that an entire face could actually be beamed onto the mask at this short distance. Mask-bot is also bright enough to function in daylight thanks to a particularly strong and small projector and a coating of luminous paint sprayed on the inside of the plastic mask. "You don't have to keep Maskbot behind closed curtains," laughs Kuratate. This part of the new system could soon be used in video conferences. "Usually, participants are shown on screen. With Mask-bot, however, you can create a realistic replica of a person that actually sits and speaks with you at the conference table. You can use a generic mask for male and female, or you can provide a custom-made mask for each person," explains Takaaki Kuratate. In order to be used as a robot face, Mask-bot must be able to function without requiring a video image of the person speaking. A new program already enables the system to convert a normal two-dimensional photograph into a correctly proportioned projection for a three-dimensional mask. Further algorithms provide the facial expressions and voice. To replicate facial expressions, Takaaki Kuratate developed a talking head animation engine -- a system in which a computer filters an extensive series of face motion data from people collected by a motion capture system and selects the facial expressions that best match a specific sound, called a phoneme, when it is being spoken. The computer extracts a set of facial coordinates from each of these expressions, which it can then assign to any new face, thus bringing it to life. Emotion synthesis software delivers the visible emotional nuances that indicate, for example, when someone is happy, sad or angry. Mask-bot can realistically reproduce content typed via a keyboard -- in English, Japanese and soon German. A powerful text-to-speech system converts text to audio signals, producing a female or male voice, which can then set to quiet or loud, happy or sad, all at the touch of a button.

But Mask-bot is not yet able to understand much of the spoken word. It can currently only listen and make appropriate responses as part of a fixed programming sequence. However, this is not something that is restricted to Mask-bot alone. A huge amount of research worldwide is still being channeled into the development of programs that enable robots to listen and understand humans in real time and make appropriate responses. "Our established international collaboration is therefore more important than ever," explains Kuratate. The CoTeSys group has chosen a different route to researchers who use dozens of small motors to manipulate individual facial parts and reproduce facial expressions. Mask-bot will be able to combine expression and voice much faster than slower mechanical faces. The Munich researchers are already working on the next generation. Mask-bot 2 will see the mask, projector and computer control system all contained inside a mobile robot. Whereas the first prototype cost just under EUR 3,000, costs for the successor model should come in at around EUR 400. Besides video conferencing, "These systems could soon be used as companions for older people who spend a lot of time on their own," continues Kuratate. Mask-bot is the result of collaboration with AIST, the National Institute of Advanced Industrial Science and Technology in Japan.

TRADUCCION

Mscara-Bot: Un robot con rostro humano ScienceDaily (7 de noviembre de 2011) - los investigadores de robtica en Munich han unido sus fuerzas con los cientficos japoneses para desarrollar una ingeniosa solucin tcnica que le da un rostro humano robots. Mediante el uso de un proyector para transmitir la imagen en 3D de una cara en la parte de atrs de una mscara de plstico, y una computadora para controlar la voz y las expresiones faciales, los investigadores han tenido xito en la creacin de la mscara-bot, una cabeza sorprendentemente parecidos a los humanos de plstico. Sin embargo, incluso antes de que esta tecnologa se utiliza para dar a los robots del futuro de un rostro humano, es muy posible que pronto se puede utilizar para crear avatares para los participantes en las conferencias de vdeo. El proyecto forma parte de la investigacin que se lleva a cabo en CoTeSys, Cluster de Munich robtica de excelencia. Mscara-Bot que ya se pueden reproducir de dilogo simple. Cuando el Dr. Takaaki Kuratate dice "arco iris", por ejemplo, agita sus prpados y responde con una frase increblemente elaborada sobre el tema: "Cuando la luz solar incide

sobre las gotas de lluvia en el aire, actan como un prisma y forman un arco iris." Y cuando habla, la mscara-bot tambin se mueve la cabeza un poco y levanta sus cejas para crear una impresin bien informado. Lo que al principio parece engaosamente como una persona real hablando en realidad es el prototipo de un rostro nuevo robot que un equipo del Instituto de Sistemas Cognitivos (ICS) en la TU Mnchen se ha desarrollado en colaboracin con un grupo en Japn. "Mscara-bot influir en la manera en que los seres humanos comunicarse con los robots en el futuro", predice el profesor Gordon Cheng, jefe del equipo de CSI. Los investigadores desarrollaron una serie de innovaciones en el curso de creacin de la mscara-bot. La proyeccin de cualquier nmero de caras realistas en 3D es uno de ellos.Aunque otros grupos han desarrollado en tres dimensiones cabezas, stos muestran un estilo ms como de dibujos animados. Mscara-bot, sin embargo, puede mostrar realistas en tres dimensiones la cabeza en una mscara de plstico transparente, y puede cambiar la cara a la carta. Un proyector situado detrs de la mscara con precisin haces un rostro humano en la parte posterior de la mscara, la creacin de caractersticas muy realistas que se pueden ver desde varios ngulos, incluyendo la cara. Muchos proyectos de sistemas comparables se enfrenta en la parte frontal de una mscara - siguiendo el mismo concepto, como la proyeccin de cine. "Walt Disney fue un pionero en este nuevo campo en la dcada de 1960", explica Kuratate. "l hizo las instalaciones en su mansin encantada por la proyeccin de las caras de los actores haciendo una mueca en los bustos." Considerando que, de Walt Disney proyecta imgenes de la parte delantera, los creadores de uso de la mscara-bot a bordo de proyeccin trasera para garantizar una perfecta cara a cara interaccin. Esto significa que slo hay un doce brecha centmetro entre la alta compresin, x0.25 ojo de pez lente con un adaptador macro y la mscara de cara. El equipo de CoTeSys por lo tanto, tena que asegurarse de que una cara entera en realidad podra ser transmitida en la mscara a esta distancia corta. Mscara-bot es tambin lo suficientemente brillante como para poder funcionar en luz del da gracias a un proyector particularmente fuerte y pequea y un recubrimiento de pintura luminosa rociado en el interior de la mscara de plstico. "Usted no tiene que mantener la mscara-bot detrs de las cortinas cerradas", se re Kuratate. Esta parte del nuevo sistema pronto podra ser utilizado en conferencias de vdeo. "Por lo general, los participantes se muestran en la pantalla. Con la mscara-bot, sin embargo, puede crear una rplica realista de una persona que realmente se sienta y habla con usted en la mesa de conferencias. Puede utilizar una mscara genrica de hombres y mujeres, o puede proporcionar una mscara hecha a medida para cada persona ", explica Takaaki Kuratate. Con el fin de ser utilizado como una cara del robot, Mscara-bot debe ser capaz de funcionar sin requerir una imagen de vdeo de la persona que habla. Un nuevo programa ya permite que el sistema para convertir una normal de dos dimensiones fotografa en una proyeccin correctamente proporcionada por una mscara tridimensional. Algoritmos adicionales proveen de las expresiones faciales y de voz. Para reproducir las expresiones faciales, Takaaki Kuratate desarrollado un motor

de animacin de la cabeza hablando - un sistema en el que un equipo filtra una amplia serie de datos de movimiento de personas se enfrentan recogidos por un sistema de captura de movimiento y selecciona las expresiones faciales que mejor se adapten a un sonido especfico, llamado un fonema, cuando se est hablando.El equipo extrae una serie de coordenadas faciales de cada una de estas expresiones, que luego se pueden asignar a ninguna cara nueva, por lo tanto, traer a la vida. Software de sntesis de las emociones ofrece los matices emocionales visibles que indican, por ejemplo, cuando alguien est feliz, triste o enojado. Mscara-bot pueden reproducir con realismo el contenido escrito a travs de un teclado - en Ingls, japons y alemn pronto. Un potente de texto a voz convierte el texto en sistema de seales de audio, produciendo una voz femenina o masculina, que se puede configurar para silencioso o ruidoso, alegre o triste, todo al toque de un botn. Pero la mscara-bot no es an capaz de comprender gran parte de la palabra hablada. En la actualidad slo puede escuchar y dar respuestas apropiadas como parte de una secuencia de programacin fija. Sin embargo, esto no es algo que se limita a la mscara-bot solo. Una gran cantidad de investigacin a nivel mundial todava se est canalizado en el desarrollo de programas que permiten a los robots para escuchar y entender a los humanos en tiempo real y dar respuestas apropiadas. "Nuestra colaboracin internacional establecido por lo tanto, es ms importante que nunca", explica Kuratate. El grupo CoTeSys ha elegido una ruta diferente a los investigadores que utilizan decenas de pequeos motores individuales para manipular partes de la cara y se reproducen las expresiones faciales. Mscara-robot ser capaz de combinar la expresin y la voz mucho ms rpido que lento caras mecnicos. Los investigadores de Mnich estn trabajando ya en la prxima generacin. Mscarabot 2 ver la mscara, proyector y sistema informtico de control de todo el contenido dentro de un robot mvil. Considerando que el coste primer prototipo de algo menos de 3.000 euros, los costes para el modelo sucesor debe venir en alrededor de 400 euros. Adems de la videoconferencia: "Estos sistemas de pronto podra ser utilizado como compaeros para las personas mayores que pasan mucho tiempo solos", contina Kuratate. Mscara-bot es el resultado de la colaboracin con el AIST, el Instituto Nacional de Ciencia Industrial Avanzada y Tecnologa de Japn.

http://www.sciencedaily.com/releases/2011/11/111107161758.htm