Assistente de Voz com IA para Pacientes Medicare

O Desafio

Uma empresa de saúde precisava desenvolver um dispositivo assistente para pacientes Medicare—similar à Alexa, mas construído especificamente para saúde. O dispositivo precisava coordenar cuidados, fornecer entretenimento e permitir interações de voz naturais para usuários idosos em iPads. O desafio era construir um MVP pronto para produção que pudesse lidar com conversas de voz em tempo real com baixa latência, sendo acessível para idosos.

A Solução

Construímos um assistente de cuidados habilitado por voz usando LiveKit Agents para processamento de voz em tempo real, com Deepgram para speech-to-text e Cartesia para text-to-speech com som natural. O frontend roda como um app web Next.js otimizado para iPads, suportando interações por toque e voz. O backend Python orquestra o pipeline de IA e integra com sistemas de saúde. Integramos Langfuse para observabilidade completa do pipeline de voz—rastreando cada conversa, medindo latência em cada etapa e monitorando custos. O LiveKit acelerou significativamente nosso desenvolvimento—as abstrações bem projetadas do framework e a excelente documentação nos permitiram implantar a primeira versão funcional para clientes em apenas 2 semanas. Durante o desenvolvimento, nos engajamos com a comunidade LiveKit: abrindo issues, pedindo suporte e até contribuindo de volta ao repositório. A comunidade e os contribuidores principais foram responsivos e prestativos, tornando a integração suave.

Resultados

• Primeiro MVP funcional implantado para clientes em 2 semanas
• Latência de resposta de voz inferior a 500ms alcançada
• Interface multimodal de toque e voz para acessibilidade
• Jogos interativos para engajamento do paciente
• Observabilidade completa do pipeline com rastreamento Langfuse

Tecnologias Utilizadas