Manufaturação industrial
Internet das coisas industrial | Materiais industriais | Manutenção e reparo de equipamentos | Programação industrial |
home  MfgRobots >> Manufaturação industrial >  >> Manufacturing Technology >> Processo de manufatura

Speathe: Comunicação Guiada pela Respiração para Usuários Paralizados

Speathe: Comunicação Guiada pela Respiração para Usuários Paralizados

Speathe é uma plataforma inovadora e em evolução que converte padrões de respiração do usuário em fala audível e texto. Projetada para indivíduos que perderam a fala devido à paralisia, oferece método discreto e hands-free para transmitir mensagens, emoções e frases cotidianas.

Componentes de Hardware

Alto-falante
3 W, 4 Ω para saída de áudio clara.
Dispositivo Android
Executa aplicação móvel React-Native.
Walabot
Sensor acústico que captura energia da respiração e classifica como respirações curtas ou longas.
Raspberry Pi 3 Model B
Executa back-end Python e servidor Flask.

Stack de Software

Como Funciona

Detecção de Respiração e Codificação Tipo Morse

O sensor Walabot mede energia de cada respiração. Após breve calibração, energias das respirações são comparadas contra limiar para classificar como curta (ponto) ou longa (traço). Sequência de respirações é traduzida em padrão código Morse (ex.: "-.-.-"). O Raspberry Pi compara este padrão a letras e frases predefinidas.

Acrônimos Predefinidos

Para reduzir esforço de digitação, acrônimos comuns de três letras (ex.: ABC, XYZ) mapeiam diretamente para frases completas. Quando sistema detecta acrônimo, app móvel exibe texto expandido imediatamente.

Arquitetura do Servidor

O Raspberry Pi hospeda servidor Flask em IP estático. Recebe dados derivados da respiração, armazena variável "message" atual, e expõe endpoints para app móvel fazer polling ou postar respostas.

sudo nano /etc/dhcpcd.conf
# Adicione ao final do arquivo
interface eth0
static ip_address=192.168.43.211
static routers=192.168.43.1
static domain_name_servers=192.168.43.1
interface wlan0
static ip_address=192.168.43.211
static routers=192.168.43.1
static domain_name_servers=192.168.43.1
# Salve com Ctrl+O e saia com Ctrl+X
sudo reboot

Aplicação Móvel

O app React-Native faz polling contínuo do endpoint Flask pela mensagem mais recente. Quando string não-vazia é recebida, exibe o texto e o reproduz em voz alta. Usuários podem responder digitando no app, que posta o texto de volta ao servidor. O servidor então pronuncia a resposta pelo alto-falante, permitindo comunicação bidirecional.

Passos de Implementação

  1. Instale Python 3 no Raspberry Pi.
  2. Baixe SDK Walabot para seu SO. Explore o BreathingExample.py fornecido para entender aquisição de dados do sensor.
  3. Configure servidor Flask no Raspberry Pi e IP estático como mostrado acima.
  4. Construa app React-Native, atualizando URL do servidor para IP do seu Pi.
  5. Conecte Walabot ao Pi, alto-falante, e dispositivo Android via Wi-Fi.
  6. Inicie o app, faça calibração rápida, e comece a falar através da respiração.

Testes

Execute back-end Python no Raspberry Pi, garanta que IP estático está acessível, e implante APK no dispositivo Android. Abra o app, alinhe seu padrão de respiração, e observe tradução em tempo real de respiração para texto.

Para exemplos de código mais detalhados e dicas de debug, consulte documentação do repositório.

Participe da Comunidade

Convidamos desenvolvedores, pesquisadores e profissionais de saúde a contribuir para evolução do Speathe. Juntos, podemos criar auxílio de comunicação robusto e acessível para comunidade paralisada.

Contato e Recursos

Processo de manufatura

  1. Dominando Tipos de Dados em Python: Guia Prático
  2. Dominando Operadores em Python: Guia Completo
  3. Dominando a Declaração Pass em Python: Guia Prático
  4. Dominando Argumentos de Funções em Python: Parâmetros Posicionais, Nomeados e Padrão
  5. Dominando Dicionários em Python: Criação, Manipulação e Técnicas Avançadas
  6. Dominando Iteradores em Python: Como Funcionam e Como Criar os Seus
  7. Closures em Python Explicados: Como Funções Aninhadas Capturam Variáveis
  8. Dominando datetime do Python: Guia Prático de Datas, Horários e Fusos Horários
  9. Visão Geral do Python: Linguagem de Alto Nível, Legível, Interativa e Orientada a Objetos
  10. Números em Python: Entender Tipos de Dados Numéricos Imutáveis