ThoughtWorks
  • Contato
  • Español
  • Deutsch
  • English
  • 中文
Visão geral
  • Cultura de engenharia, mentalidade de entrega

    Adote uma abordagem moderna ao desenvolvimento de software e entregue valor mais rapidamente

    Inteligência para tomada de decisões

    Explore seus dados para descobrir novas fontes de valor

  • Modelo de operação sem atritos

    Evolua a capacidade da sua organização de responder a mudanças

    Estratégia de plataforma

    Crie plataformas de tecnologia que se adaptam à sua estratégia de negócios

  • Design de experiência e inovação de produtos

    Planeje, execute e evolua rapidamente produtos e experiências excepcionais

    Parcerias

    Extraindo valor da nossa rede de parceiras para potencializar os resultados que entregamos a nossas clientes

Visão geral
  • Setor automotivo
  • Cleantech, energia e utilidade pública
  • Serviços financeiros e seguros
  • Saúde
  • Mídia
  • Organizações sem fins lucrativos
  • Setor público
  • Varejo e e-commerce
  • Viagem e transporte
Visão geral

Destaques

  • Tecnologia

    Uma análise abrangente de tecnologias e práticas de engenharia nas empresas

  • Negócios

    Mantenha-se em dia com as mais recentes tendências da indústria

  • Cultura

    Um espaço para conteúdo sobre desenvolvimento profissional e nossa visão sobre justiça social e inclusão

Ferramentas e Publicações Digitais

  • Technology Radar

    Um guia com opiniões firmes sobre as fronteiras da tecnologia

  • Perspectives

    Uma publicação para líderes digitais

  • Modelo de Fluência Digital

    Um modelo para priorizar as competências digitais necessárias para se navegar a incerteza

  • Decoder

    Um guia de A a Z sobre tecnologia para lideranças executivas

Todos os Insights

  • Artigos

    Visões de especialistas para ajudar seu negócio a crescer

  • Blogs

    Pontos de vista pessoais de ThoughtWorkers de todo o mundo

  • Livros

    Explore nossa vasta biblioteca

  • Podcasts

    Discussões instigantes sobre as últimas novidades em negócios e tecnologia

Visão geral
  • Processo de aplicação

    O que esperar de uma entrevista conosco

  • Pessoas em início ou mudança de carreira

    Comece sua jornada na tecnologia aqui

  • Vagas abertas

    Encontre oportunidades na sua região

  • Conecte-se

    Assine nossa newsletter mensal

Visão geral
  • Conferências e eventos
  • Diversidade e Inclusão
  • Notícias
  • Código aberto
  • Nossas lideranças
  • Transformação social
  • Español
  • Deutsch
  • English
  • 中文
ThoughtWorksMenu
  • Fechar   ✕
  • O que fazemos
  • Com quem trabalhamos
  • Insights
  • Carreiras
  • Sobre
  • Contato
  • Voltar
  • Fechar   ✕
  • Visão geral
  • Cultura de engenharia, mentalidade de entrega

    Adote uma abordagem moderna ao desenvolvimento de software e entregue valor mais rapidamente

  • Design de experiência e inovação de produtos

    Planeje, execute e evolua rapidamente produtos e experiências excepcionais

  • Modelo de operação sem atritos

    Evolua a capacidade da sua organização de responder a mudanças

  • Inteligência para tomada de decisões

    Explore seus dados para descobrir novas fontes de valor

  • Parcerias

    Extraindo valor da nossa rede de parceiras para potencializar os resultados que entregamos a nossas clientes

  • Estratégia de plataforma

    Crie plataformas de tecnologia que se adaptam à sua estratégia de negócios

  • Voltar
  • Fechar   ✕
  • Visão geral
  • Setor automotivo
  • Cleantech, energia e utilidade pública
  • Serviços financeiros e seguros
  • Saúde
  • Mídia
  • Organizações sem fins lucrativos
  • Setor público
  • Varejo e e-commerce
  • Viagem e transporte
  • Voltar
  • Fechar   ✕
  • Visão geral
  • Destaques

  • Tecnologia

    Uma análise abrangente de tecnologias e práticas de engenharia nas empresas

  • Negócios

    Mantenha-se em dia com as mais recentes tendências da indústria

  • Cultura

    Um espaço para conteúdo sobre desenvolvimento profissional e nossa visão sobre justiça social e inclusão

  • Ferramentas e Publicações Digitais

  • Technology Radar

    Um guia com opiniões firmes sobre as fronteiras da tecnologia

  • Perspectives

    Uma publicação para líderes digitais

  • Modelo de Fluência Digital

    Um modelo para priorizar as competências digitais necessárias para se navegar a incerteza

  • Decoder

    Um guia de A a Z sobre tecnologia para lideranças executivas

  • Todos os Insights

  • Artigos

    Visões de especialistas para ajudar seu negócio a crescer

  • Blogs

    Pontos de vista pessoais de ThoughtWorkers de todo o mundo

  • Livros

    Explore nossa vasta biblioteca

  • Podcasts

    Discussões instigantes sobre as últimas novidades em negócios e tecnologia

  • Voltar
  • Fechar   ✕
  • Visão geral
  • Processo de aplicação

    O que esperar de uma entrevista conosco

  • Pessoas em início ou mudança de carreira

    Comece sua jornada na tecnologia aqui

  • Vagas abertas

    Encontre oportunidades na sua região

  • Conecte-se

    Assine nossa newsletter mensal

  • Voltar
  • Fechar   ✕
  • Visão geral
  • Conferências e eventos
  • Diversidade e Inclusão
  • Notícias
  • Código aberto
  • Nossas lideranças
  • Transformação social
Blogs
Selecione um tema
Ver todos os tópicosFechar
Tecnologia 
Gestão de Projetos Agil Nuvem Entrega Contínua Ciência e Engenharia de Dados Defendendo a Internet Livre Arquitetura Evolutiva Design de Experiência IoT Linguagens, Ferramentas & Frameworks Modernização de sistemas legados Machine Learning & Artificial Intelligence Microsserviços Plataformas Segurança Testes de Software Estratégia de Tecnologia 
O negócio 
Serviços Financeiros Saúde Global Inovação Varejo Transformação 
Carreiras 
Dicas de Carreira Diversidade e Inclusão Transformação social 
Blogs

Topics

Escolha um tópico
  • Tecnologia
    Tecnologia
  • Tecnologia Visão Geral
  • Gestão de Projetos Agil
  • Nuvem
  • Entrega Contínua
  • Ciência e Engenharia de Dados
  • Defendendo a Internet Livre
  • Arquitetura Evolutiva
  • Design de Experiência
  • IoT
  • Linguagens, Ferramentas & Frameworks
  • Modernização de sistemas legados
  • Machine Learning & Artificial Intelligence
  • Microsserviços
  • Plataformas
  • Segurança
  • Testes de Software
  • Estratégia de Tecnologia
  • O negócio
    O negócio
  • O negócio Visão Geral
  • Serviços Financeiros
  • Saúde Global
  • Inovação
  • Varejo
  • Transformação
  • Carreiras
    Carreiras
  • Carreiras Visão Geral
  • Dicas de Carreira
  • Diversidade e Inclusão
  • Transformação social
IoTTecnologia

How NAO robots can help children understand emotion

Lina Alagrami Lina Alagrami

Published: Oct 22, 2018

Autistic children can experience difficulties in relating to others and understanding emotions. Now, help is at hand, thanks to a mask-wearing, kid-friendly robot.

This is the work of London-based ThoughtWorker, Lina Alagrami — who explored this topic at XConf EU.

Having worked with NAO robots — the commercially available teaching robots from SoftBank for three years, after initially experimenting with them at Queen Mary University of London. Lina began working on a project to create an interactive application for an NAO robot that could work with autistic children to help them interpret different emotions.

According to studies by the UK’s NHS, autistic children can struggle to relate to other kids, as they find it difficult to understand the feelings and emotions displayed by others. This makes it hard for them to start or join in conversations. By minimizing the human element and introducing games with NAO robots into a learning programme, children are less likely to concentrate on physical interaction and instead focus on the learning and education that the robot provides.

Lina’s project, The Mask of eNAOtion, is based on the creation of a method to detect how different emotions are expressed. Lina’s aim was to help young children understand what the different emotions are and how to express them, to aid their interaction with other children.

Based on a ‘Simon Says’ style game, the NAO robot asks the child to copy a specified emotion (the prototype version of the game includes four emotions; happy, sad, angry and shocked), then checks to see if the child has successfully copied it. If not, the robot asks the child to try again until the emotion is successfully copied. When the child is successful, the NAO robot congratulates them and moves on to the next emotion.

Lina’s methodology for enabling the emotion detection was to create an LED mask (The Mask of eNAOtion) which was fitted to the front of the robot. The mask is made up of a matrix of LEDs spread across three PCBs. An integrated circuit controls the 40 LEDs which make up the ‘face’ on the robot’s mask. The integrated circuit can be controlled to set the LEDs using microcontrollers (such as an Arduino or a Raspberry PI), or USB to Serial modules, which were the preferred method for this project. The USB to Serial module allows the NAO robot to send specific commands to the integrated circuit, telling it which LEDs to turn on or off, creating the happy, sad, angry and shocked faces.

Q&A with Lina Algrami

What was the reaction when you tried out The Mask of eNAOtion game with children for the first time?

As the mask is a prototype it's not really that friendly looking; I tried it with my younger siblings, ages three and ten (both are not autistic).

At first, the three-year-old was confused as to why the robot was wearing the mask, but after explaining it's used to display different emotions as the robot doesn't really have a face, she moved past it and continued to play the game.

When displaying the different emotions, she found it easy to get happy, angry and shocked but struggled with sad. For her, sad meant crying, not frowning — and that's what the robot was displaying. I had to explain she needed to copy what the robot was showing on the mask. The ten-year-old had no problem playing the game, but being surrounded by his family when it came to displaying these emotions, he'd laugh and so the robot would ask him to try again. Once again, sad was one that was tricky.

If you were doing this project again, what would you do differently?

The first thing I would do differently is the mask design. The NAO robot has two cameras (top and bottom), for this game, the bottom one had to be disabled as it's covered by the mouth PCB. For better emotion detection, using both cameras would be better, so I'd like to explore different mask designs that'll allow enabling the bottom camera. I'd also look into wireless communication between the robot and the LEDs — maybe using Wi-Fi or sound recognition (from the robot) to control the mask.

What was the biggest learning?

I specifically chose this project because it combines both hardware and software. So I'd say the whole thing was full of learning, from really digging into the different USB to Serial devices and the different protocols, all the way to emotion detection and finding the perfect threshold for different emotions. But if I had to narrow to just one learning, it would definitely be don't trust hardware — one loose wire can ruin everything!
 
Posts relacionados
Machine Learning & Artificial Intelligence

Recognizing human facial expressions with machine learning

Angelica Perez
Saiba mais
Machine Learning & Artificial Intelligence

How artists are reshaping emerging technology research

Andrew McWilliams
Saiba mais
Machine Learning & Artificial Intelligence

How art programs drive innovation at ThoughtWorks

Andrew McWilliams
Saiba mais
  • O que fazemos
  • Com quem trabalhamos
  • Insights
  • Carreiras
  • Sobre
  • Contato

WeChat

×
QR code to ThoughtWorks China WeChat subscription account

Mídia e relações públicas | Política de privacidade | Modern Slavery statement ThoughtWorks| Acessibilidade | © 2021 ThoughtWorks, Inc.