Controle por gestos em automóveis

O controle automotivo por gestos interpreta um movimento da mão ou do corpo como um comando sem exigir contato com um controle convencional. Ele pode reduzir o alcance ou a mira visual para um pequeno conjunto de comandos, mas apenas se o gesto for fácil de descobrir, reconhecido de forma confiável e seguido de um retorno inequívoco.

Como funciona a entrada por gestos

Os sistemas de gestos na cabine podem usar um sensor infravermelho, uma câmera bidimensional ou de profundidade, radar ou uma combinação de sensores. O software identifica uma mão, acompanha seu movimento, classifica o padrão e associa o resultado a um comando.

Os tipos comuns de interação incluem:

um gesto distinto no ar, como deslizar ou girar;
apontar para uma área da tela ou objeto físico;
uma posição da mão mantida por um tempo definido;
um gesto combinado com olhar, fala ou um controle no volante;
detecção de proximidade que revela controles antes do contato.

A zona de reconhecimento é importante. Um gesto que só funciona em determinada altura ou distância pode obrigar o usuário a procurar um alvo invisível. O sistema deve indicar quando a mão entrou na zona ativa e quando um comando foi reconhecido.

Tarefas adequadas

O controle por gestos é mais convincente para algumas ações de baixa consequência e reversíveis:

ajustar o volume do áudio;
dispensar uma chamada ou notificação;
percorrer uma lista curta de mídia;
revelar informações contextuais;
controlar uma função do passageiro quando um controle físico está fora de alcance.

Ele é uma interface exclusiva inadequada para o pisca-alerta, a seleção de marchas, os limpadores ou outra ação que precise funcionar imediatamente e de forma previsível. Um comando com consequências para segurança, proteção, pagamento ou acesso exige um caminho de confirmação mais explícito.

O melhor vocabulário de gestos usa movimentos que as pessoas conseguem lembrar, realizar com pouco esforço e diferenciar de uma conversa normal ou dos movimentos ao dirigir. Um gesto não deve depender de um significado culturalmente específico sem instrução clara.

Capacidade de descoberta e retorno

Um controle físico anuncia sua posição. Um gesto no ar não. O sistema precisa, portanto, de uma forma de ensinar os comandos disponíveis sem exigir que o motorista estude um manual enquanto dirige.

Quando viável, o retorno deve ser multimodal:

uma indicação visual discreta pode mostrar a zona ativa ou o gesto interpretado;
um som curto pode confirmar a aceitação sem outro olhar;
a háptica no ar pode acrescentar uma sensação de limite ou conclusão;
um caminho de desfazer imediato pode recuperar uma ativação falsa.

Pesquisas sobre retorno multimodal para gestos no ar em automóveis examinaram como indicações visuais, sonoras e táteis afetam a interação em condução simulada. Os resultados dependem da tarefa, da implementação e do projeto do estudo; eles reforçam a avaliação do ciclo completo de retorno, em vez da suposição de que a entrada sem contato causa inerentemente pouca distração. Shakeri et al. — Multimodal feedback for in-car mid-air gesture interaction

Modos de falha

Os sistemas de gestos enfrentam erros específicos:

ativação falsa: um movimento comum da mão é interpretado como um comando;
ativação perdida: o movimento pretendido ocorre fora da zona de detecção;
erro de classificação: o movimento é detectado, mas associado ao comando errado;
erro de modo: o mesmo gesto significa algo diferente em outra tela ou contexto;
oclusão: roupas, o volante, outro ocupante ou um objeto bloqueia o sensor;
erro de retorno: o comando é executado sem que o usuário perceba ou parece falhar apesar de ter sido registrado.

Luz solar, escuridão, luvas, mangas, layout da cabine, movimento dos passageiros e lateralidade podem afetar um determinado projeto de sensor. A questão relevante é o desempenho medido na cabine de produção, não a tecnologia de detecção nominal.

O que as evidências podem e não podem mostrar

Um estudo de acesso aberto de 2022 desenvolveu um conjunto de gestos no ar definido por usuários para o controle de mídia e comparou seu protótipo com a interação por toque em um experimento de rastreamento ocular em simulador de condução. O protótipo reduziu medidas de distração visual nas tarefas selecionadas, mas isso não estabelece que todos os sistemas de gestos, comandos ou condições em vias reais farão o mesmo. Zhang et al. — Mid-air gestures for in-vehicle media control

A ISO 15005 oferece princípios mais amplos de gerenciamento do diálogo para interações no veículo em movimento. Aplicar esses princípios aos gestos significa manter a sequência compatível com a tarefa de condução, deixar claro o estado do sistema, permitir interrupções e evitar etapas desnecessárias. ISO 15005:2017 — Dialogue management principles

O controle por gestos deve ser comparado com a melhor alternativa para a mesma tarefa. Um seletor giratório pode superar tanto o gesto quanto o toque em ajustes repetidos de volume. A voz pode ser melhor para um destino. Uma tela pode ser melhor para a escala de um mapa. O gesto só merece seu lugar quando reduz o custo total da interação.

O que os compradores devem verificar

É possível descobrir os gestos aceitos sem ler um manual extenso?
O sistema mostra onde começa a zona de detecção?
O reconhecimento e a execução são confirmados sem um olhar prolongado?
Movimentos comuns das mãos podem acionar um comando?
O mesmo gesto mantém o mesmo significado em diferentes contextos?
Como o sistema se comporta sob luz solar direta e na escuridão?
Motorista e passageiro podem usá-lo sem controlar a zona errada?
Toda ação importante por gestos também está disponível em outro controle?
Uma ação equivocada pode ser cancelada ou desfeita imediatamente?
O recurso ainda poupa esforço depois que a novidade passa?

Uma boa interface por gestos é modesta. Ela oferece alguns atalhos memoráveis, permanece silenciosa durante movimentos comuns e nunca deixa o usuário em dúvida sobre se o carro percebeu o comando.