Projeto CoCoa: Um Colete De Comunicação Alternativa: 8 Steps

2024 Autora: John Day | [email protected]. Última modificació: 2024-01-30 08:11

El projecte CoCoA és una armilla usable connectada a Internet que permet l’acoblament de símbols tàctils de comunicació alternativa per ajudar les persones amb discapacitat de parla o no verbal.

O Colete de Comunicação Alternativa (CoCoA) consisteix en un vestit col·lectiu (desgastable) connectat a internet que permet o acoplamento de símbols tàteis de comunicação alternativa per auxiliar pessoas com deficiencia de fala o no verbais.

Deficiências de fala afetam pessoas com autismo, afasia, paralisia cerebral, surdez parcial ou total, entre altres transtornos. Em pessoas com autismo, per exemple, és freqüent a presència de no verbalització o atraso de fala. A ausência de fala pode também ser uma deficiência temporária devido a alguma enfermidade.

O comprometimento de fala, permanente o temporário, necessita de atenção e tratamento, pois esta habilidad é importante para a socialização e para que a pessoa que represente una altra condició o deficiência possa ser millor comprendre les seves necessitats.

Recursos assistius de comunicação alternativa (CA) são usados para auxiliar as pessoas com deficiência de fala a se comunicar con sus familiares, terapeutas e demais pessoas. Pictogramas são uma das formes mais frequentes de recurso de CA, onde a pessoa puede apontar para os símbolos fixados en pontos estratégicos da casa o usant aplicatius que vocalitzin aquests símbols, com o Proloquo2Go.

Porém, os pictogramas físicos só podem ser utilizados para a pessoa se comunicar con otras pessegas no mesmo ambiente, o que dificulta a comunicação com seus cuidadores caso ela tenha uma necessidade urgente e eles estam em altres ambientes.

O Colete de Comunicação Alternativa (CoCoA) consisteix en un vestit col·lectiu (weareable) connectat a internet que permet o acoplamento de símbols tàteis de comunicação alternativa per a auxiliars de temes com deficiència de fala o no verbais a expressar les seves necessitats a cuidadores, terapeutas, professores e altres professions de salut, sempre que ells estiguin sempre presentes no mateix ambient da pessoa com deficiència, facilitant o monitorant.

O CoCoA possibilitarà que l’usuari inclogui sis símbols de CA, realitzant diferents combinacions, que siguin sensores (botes) que, fins a ser pressionats, tinguin dues accions:

Emitir o som das ações escolhidas por meio de um alto falante acoplado ao colete; Envio das ações escolhidas em format textual via internet per algum aplicatiu de comunicação dos cuidados, terapeutas o professores, possibilitant que ells posseeixin ser comunicats per necessitat de pessoa cas no estàjam no mesmo recinto

Per dar um feedback à pessoa com deficiência, os botões pressionados também piscaram um LED para indicar as ações escolhidas. Assim, és proposta d’una solució d’interfície vestida, connectada, no intrusiva, portàtil i fàcil d’utilitzar per a auxiliars amb deficiències de fala a comunicar les seves necessitats en lloc o remotament. O col·legi no requereix esforç físic per a ús, pot ser usat en diferents llocs i facilitat a assistència amb pèrdua com a deficiència per atendre les seves necessitats, potencialment impedint que el fiquem desconfortable o estressades

Aquest projecte va ser desenvolupat per Mauro Pichiliani ([email protected]) i Talita Pagani ([email protected])

Pas 1: Components de maquinari

Per a projectar CoCoA utilitzem els següents elements físics (hardware):

1 placa DragonBoard 410C. Cost aproximat: 75 dòlars.

1 Arduino NodeMCU ESP 8266 o un altre arduino amb cabell menys 13 portes GPIO PWN. Cost aproximat: R $ 59, 90

1 Mòdul de lectura d'etiquetes model RFID RC522 de Mifare. Cost aproximat: R $ 39, 90

8 etiquetes RFID da Mifare. Cost aproximat: R $ 23, 20

8 botons tipus botó. Cost aproximat: R $ 2, 90

8 LEDs de diversos nuclis. Cost aproximat: R $ 16, 90

6 Resistors de 330Ohm. Cost aproximat: R $ 1, 90.

5 metros quadrados de tecido TNT marrom. Cost aproximat: R $ 12, 90

1 metro de tira de velcro. Cost aproximat R $ 16, 74

8 Imatges de símbols impresos en paper

1 USB alt falante. Cost aproximat: R $ 32, 05

1 adaptador de som USB. Cost aproximat: R $ 25, 90

1 Cartró de memòria miniSD de 4 GB. Cost aproximat: R $ 19, 90

1 paquet de piles com a font d'alimentació (2000 mAPH i 12 V de sortida). Cost aproximat: R $ 115, 00

20 metros da cabo paralelo Cristal. Cost aproximat: R $ 20, 00

Ferramentes gerais (alicate, chave de fenda, ferro de solda, pistola de cola quente, etc), fios e fita isolante

Pas 2: Diagrames de Funcionament

Per a auxiliar de comprensió del funcionament del col·legi, podem explicar el seu ús per mitjà de trames diagrames:

Diagrama 1: Este fluxo representa o uso inicial da roupa descrevendo os passo necessário para vestí-la e accessar os áudio já cadastrados.

Diagrama 2: Este diagrama mostra os passos para se trocar uma das almofadas existentes para que otro símbolo / som seja colocado no colete

Diagrama 3: Este diagrama mostra os passos para trocar o áudio associada a uma almofada existente. Aquest flux no es va implementar a la versió 1.0 del coleta

Pas 3: programari

Utilitzeu els següents programes sense projecte:

IDE do Arduino

Python 3.5

As dependências externas do do project foram a biblioteca do arduino for lidar com o módulo leitor do RFID, a biblioteca do Python twx.botapi per interagir com o Telegram e a biblioteca PySerial para ler / gravar dados pela porta serial com o Python. As bibliotecas do Python podem ser instal·lades utilitzant un gerenciador de pacotes pip.

Tots els codis fonts del projecte estan disponibles no disponibles al següent dipòsit de GitHub:

github.com/pichiliani/CoCoA

Pas 4: Connexions Físiques

A arquitetura do project CoCoA se baseia en placa DragonBoard 410C, em um arduino NodeMCU 8622, na placa leitora de RFID, leds, pusb buttons e uma caixa de som. Também é feita uma integração com um bot do Telegram chamado ProjectCoCoABot que envia uma mensagem com o áudio gerado cada vegada que um dos botões for pressionado. Cofigra na figura a arquitetura completa da solució.

És primer connectar-se o llegir RFID i els Leds no arduino i depois fazer o upload do code que està na pasta / CocoaNodeMCUServer no GitHub. Els diagrames de connexions tant dos Leds com a leitor RFID són mostrats en les figures que il·lustren aquest pas.

Ainda na part de connexió física precisos realitzem una connexió de dos botons amb una placa DragonBoard. Aquest diagrama i taula també es mostren en imatges que acompanyen aquest pas.

Pas 5: Construção Das Almofadas

As almofadas que contém os símbolos devem ser construídas em seguida. Existeixen varis símbols i sistemes per a comunicação no verbal, però podem indicar o PECS com a un bon punt de partida. Aquest sistema posseeix diversos símbols que podem ser impresos i col·locats en almofades.

As almofadas possuem cerca de 10x10cm e foram preenchidas com algodão. É important lembrar de colocar dentro de cada almofada um dos chaveiros que contém a tag RFID para que seja possível identificar cada uma das almofadas e seus respectivos sons.

Na parte da frente da frente da almofada col·loquem el mateix símbol dues vegades: um com a imatge voltada per a dalt i altre per baix. Desta forma é possible que o usuari do colete observe qual símbolo foi pressionado. Não esqueça de colocar na parte de trás da almofada um pedaç de um dos lados do velcro para que seja possível colocar e retirar a almofada do colete.

Pas 6: Construção Do Colete

A próxima etapa é a construção do colete. Per isso utilize um molde de colete infantil masculino e faça os cortes no tecido de modo que haja um forro. Nestes links podem trobar alguns motlles de coletes per imprimir:

marlenemukaimoldeinfantil.com.br/2017/02/07/colete-social/

cortandoecosturando.com/Pap%20colete.html

É important definir o local na parte da frente onde as almofadas vão ser encaixadas. Nestes locais devemos colocar parts do velcro para que as almofadas sejam encaixadas corretamente. Ainda na parte da frente podemos fazer os furos para colocar a parte que brilha dos leds logo acima das almofadas.

Na part de trás do local das almofadas precisamos encaixar os leds e cada um dos push buttons. És important encaixar els botons de forma que ells es queden enrere de manera local amb velcro sense col·le. Desta forma assim que o usuari pressionar o centre da almofada ele forçará a parte "dura" da almofada (o chaveiro com a tag rfid) e pressionará o push button.

Es recomana fixar totes les parts internes del colete (leds, resistores, push buttons e fios) utilitzant un quanta quanta. Já a ligação dos fios pode ser feita com solda + fita isolante. Outra alternativa para evitar o uso de solda é cola quente o esmalte d'una transparente do tipo "base".

A próxima parte do colete é construir pequenos bolsinhos per guardar os components de cada àrea das almofadas na part de dentro. Crie também um bolso na parte da frente do colete mais perto da cintura para guardar a caixa de som. É recomendável colocar diverses tiras de velcro para fechar o colete na parte da cintura e dar firmeza á roupa.

Os fios que vão ligar os components (leds e push buttons) de cada àrea de toque devem ser agrupats de dois em dois. Desta forma teremos seis tiras com dois cabos cada. Vale a pena lembrar que cada cap possui dois fios: o positiu i o negatiu. És important marcar a ordem dos cabos i qual component està lligat a cada cap (led o push button). Recomendamos passar as tiras de fios pelos ombros dividindo em dois grupos de três.

Uma vez que os cabos e os fios já estejam connectats podem fer-ho o col·locar col·locant o forro. Per finalitzar, crie um bolso horizontal na part de trás do colete para guardar as placas (NodeMCU e DragonBoard), o conector de som USB i a bateria que vaig a lligar a DragonBoard.

Pas 7: Lliga Geral E Teste

Uma vez que as tiras do colete já estejam passadas para a parte de trás é preciso fazer as conexões com as placas. Són necessàries 12 connexions per als botons de pulsació (6x2) i més 12 connexions per als leds.

É preciso um cuidado adicional para ligar os fios que levam o sinal de terra (GND - Groud) para os leds, pois totes as sis "perninhas" dos leds devem ser ligadas no mesmo fio. De forma semelhante, se "perminhas" dos push buttons correspondents ao terra (GND) devem ser ligados no mesmo fio.

Per fim, conecte na porta USB o adaptador de som (dongle) e ligue o adaptador na caixa de som, que devem ser col·locada no bolso da frente do colete que fica na parte de baixo. Conecte o cabo USB no NodeMCU e na altra porta da USB da placa DragonBoard 410c. Per fim, ligue o pack de pilhas da bateria ao pin de alimentação (força) e inicie o programa CoCoaServer.py na placa DragonBoard com sudo (use uma coneão SSH ou conecte um monitor + teclado + mouse diretamente na placa):

$ sudo python CoCoaServer.py

A cada botão pressionado uma mensagem aparecerá no console da placa, o áudio correspondente serà tocado e o led associado com a almofada serà tocado.

Para um resumo do projecto veja o video indicado no link abaixo:

www.youtube.com/embed/-DxK2O-LcAA

Pas 8: referències

Referències relacionades amb la comunicació alternativa:

Aplicatiu de vocalització de símbols Proloquo2Go -

Saba M. P., Filippo D., Pereira F. R., de Souza P. L. P. (2011) Hey yaa: Una advertència hàptica que es pot utilitzar per donar suport a la comunicació de persones sordes. A: Vivacqua A. S., Gutwin C., Borges M. R. S. (eds) Col·laboració i tecnologia. CRIWG 2011. Notes de conferències en informàtica, vol 6969. Springer, Berlín, Heidelberg. DOI 10.1007 / 978-3-642-23801-7_17

Referències sobre biblioteques de Python utilitzades:

PySerial

Twx.botapi

Informació sobre una placa DrabonBoard 410c

Exemple d'ús del controlador de RFID no arduino

Moldes de coleta masculí infantil

marlenemukaimoldeinfantil.com.br/2017/02/07/colete-social/https://cortandoecosturando.com/Pap%20colete.html