sign_language
IA Libras Tradução em tempo real
  1. Início
  2. Hand tracking libras e a tradução de sinais em tempo real
Atendimento em Libras

Hand tracking libras e a tradução de sinais em tempo real

Para quem precisa de comunicação acessível sem barreiras, veja como a câmera do celular lê a movimentação das mãos com precisão e segurança para apoiar o atendimento.

Mulher sorridente sinalizando em Libras para a câmera do computador

A barreira na comunicação e a leitura dos sinais

Chegar à recepção de uma clínica ou hospital e encontrar um atendente falando de máscara ou de costas é uma realidade frequente para a pessoa surda. Em farmácias, bancos e postos de saúde, a comunicação costuma travar logo no primeiro contato. A tecnologia de hand tracking libras surge para mudar essa dinâmica, permitindo que a movimentação das mãos seja interpretada diretamente pelo aparelho sem intermediários.

Quando alguém que se comunica em língua de sinais tenta resolver pendências em balcões ou por telefone, a falta de canais preparados gera espera e dependência. O reconhecimento de sinais pela câmera traz autonomia imediata para conversas cotidianas, permitindo que o diálogo flua em texto e voz.

O que o bom atendimento e as normas exigem

Garantir acessibilidade comunicacional é uma exigência legal e um princípio básico de respeito no Brasil. Estima-se que mais de 10 milhões de pessoas tenham algum grau de deficiência auditiva no país, sendo cerca de 2,3 milhões com deficiência severa. Empresas e órgãos públicos precisam estar preparados para receber essa comunidade sem improvisos que causem constrangimento.

O bom atendimento exige que a pessoa surda tenha autonomia para solicitar informações, esclarecer dúvidas e tomar decisões sobre a própria saúde ou serviços contratados. A adoção de tecnologia assistiva para surdos assegura que o direito à comunicação em Libras seja cumprido no balcão e nos canais digitais, reduzindo o isolamento gerado por senhas faladas ou atendimentos exclusivamente em áudio.

Como o hand tracking libras funciona na prática

O sistema funciona diretamente no navegador, sem precisar instalar programas ou extensões. A câmera do celular ou computador faz o rastreamento de mãos em libras identificando 42 pontos por mão em tempo real. O modelo também utiliza visão holística para acompanhar expressões faciais e movimentos do tronco, elementos fundamentais na gramática da língua de sinais.

O processamento ocorre inteiramente no aparelho (Edge AI). Isso significa que as imagens da câmera não são gravadas nem enviadas para servidores externos, mantendo a privacidade total do usuário. O modelo de reconhecimento ONNX v1.1 reconhece 5.613 sinais cadastrados, convertendo a sinalização em texto e voz em português instantaneamente.

Além disso, o tradutor de libras no navegador conta com um Dicionário de 5.824 sinais com vídeo, divididos em 20 categorias. Caso a IA tenha dúvida sobre um sinal específico, ela avisa na tela e permite que a pessoa ensine a variação com facilidade.

Como a sua instituição organiza o atendimento acessível

Organizar o atendimento acessível em hospitais, clínicas, escolas, bancos e comércios requer canais bem definidos. No app da IA Libras, os recursos foram desenhados para atender diferentes necessidades do cotidiano:

  • Reconhecimento na câmera: instalado em totens, recepções ou computadores de atendimento para traduzir a Libras em voz e texto na hora.
  • Ligação assistida: permite que a pessoa surda telefone para serviços de suporte de forma independente, com a IA sintetizando a voz e transcrevendo as respostas.
  • ChatSurdo: canal de videochamada e mensagens P2P criptografado entre surdos, ouvintes e profissionais, que serve de base para a IA aprender a regionalização da Libras em todo o Brasil.
  • Atendimento em Libras e Painel do intérprete: conecta chamadas com voluntários quando a fila está aberta, além de oferecer o modo SOPRO, que dá suporte discreto ao profissional durante a conversa.

Instituições que desejam estruturar esse fluxo em suas unidades devem entrar em contato com a equipe pelo formulário da página, selecionando o perfil Empresa / Instituição para informar o volume e o tipo de atendimento necessário.

Cuidados essenciais, limites técnicos e apoio humano

Para que o reconhecimento visual alcance a máxima precisão, alguns cuidados com o ambiente são indispensáveis no dia a dia:

  • Iluminação adequada: ambientes muito escuros ou com luz forte diretamente atrás do sinalizador dificultam a leitura dos pontos da mão.
  • Enquadramento da câmera: mantenha as mãos e o tronco visíveis dentro da área de captura durante toda a sinalização.
  • Nomes e dados sensíveis: digite endereços, números de documentos e valores no chat para evitar qualquer duplicidade de interpretação.

A tecnologia da IA Libras complementa o trabalho do intérprete humano e não tem o objetivo de substituí-lo. Em situações críticas, como consultas médicas de alta complexidade, audiências judiciais e depoimentos policiais, a presença do intérprete profissional é indispensável. Vale destacar que o Atendimento em Libras com voluntários depende da abertura da fila, que atualmente passa por reestruturação após o encerramento de campanhas de arrecadação.

Primeiros passos para começar a usar

Seja para uso pessoal ou institucional, a integração de ferramentas acessíveis promove autonomia e agilidade no relacionamento com a comunidade surda:

  • Para pessoas surdas, familiares e intérpretes: você pode acessar o app da IA Libras de graça pelo navegador em web.ialibras.com.br e utilizar o Reconhecimento na câmera, o Dicionário, a Ligação assistida e o Treino imediatamente.
  • Para empresas e instituições: acesse o formulário nesta página com o perfil Empresa / Instituição, informe sua estimativa de atendimentos e converse com nossa equipe técnica para planejar a recepção acessível.
  • Para aprender e colaborar: use a seção Aprender lendo para praticar Libras e ajudar no aperfeiçoamento contínuo dos modelos da comunidade.

Perguntas frequentes

Como funciona o hand tracking para Libras no celular?

A câmera do aparelho identifica 42 pontos em cada mão por meio de inteligência artificial em tempo real. O processamento roda direto no navegador pelo modelo ONNX v1.1, traduzindo os sinais em texto e áudio sem enviar o vídeo para a internet.

O reconhecimento de Libras pela câmera substitui o intérprete humano?

Não, a ferramenta serve como apoio para diálogos rápidos e atendimentos do dia a dia. Em situações de alta complexidade, como procedimentos médicos e atos jurídicos, a presença do intérprete de Libras profissional é essencial.

As imagens da minha câmera ficam salvas no sistema da IA Libras?

Não, o vídeo não é gravado nem transmitido para servidores externos. Todo o rastreamento dos 42 pontos por mão ocorre no próprio dispositivo do usuário, preservando a privacidade das conversas.

Como as empresas podem usar a tecnologia para atendimento em Libras?

Empresas e órgãos públicos podem preencher o formulário na página com o perfil Empresa / Instituição, indicando a demanda de atendimentos. Nossa equipe orienta a configuração do app para balcões, totens e canais remotos.

Conteúdos relacionados

Sobre a IA Libras

A IA Libras é uma plataforma brasileira e independente de inteligência artificial para a comunicação entre pessoas surdas e ouvintes. A pessoa sinaliza em Libras na câmera do celular ou do computador e a IA traduz para português, em texto e voz, na hora, direto no navegador e de graça para a comunidade. O reconhecimento roda no próprio aparelho: o vídeo da câmera não é gravado nem enviado.

O dicionário tem 5.824 sinais com vídeo e a IA reconhece 5.613 sinais. Ela aprende com a comunidade: cada sinal ensinado e cada conversa no ChatSurdo ajudam a reconhecer as variações regionais da Libras. Acesse o app da IA Libras.

Atendimento em Libras

Fale com a equipe da IA Libras

Conte como é o seu atendimento. Para empresas e instituições, organizamos juntos o atendimento em Libras; para a comunidade, o app é grátis.

sign_language

Pessoa surda

Valide sinais, sugira melhorias e ensine regionalismos da sua comunidade para aumentar a precisão dos modelos.

record_voice_over

Intérprete de Libras

Ajude na curadoria linguística e participe do suporte solidário durante as videochamadas assistidas.

domain

Empresa ou instituição

Integre acessibilidade no seu atendimento ao cliente ou apoie o projeto para viabilizar infraestrutura aberta.

Envie sua mensagem

Escolha o seu perfil. Se for empresa ou instituição, conte o volume e o tipo de atendimento que você precisa.

Mensagem enviada!

Entraremos em contato em breve. Você já pode conhecer o projeto agora mesmo:

Acessar a plataforma

Converse sem barreiras. Agora.

Acesso totalmente gratuito, livre e aberto para todos.