Use este identificador para citar ou linkar para este item:
http://repositorio.utfpr.edu.br/jspui/handle/1/4808| Título: | Prancha de comunicação alternativa por imagens empregando predição de palavras |
| Título(s) alternativo(s): | Pictures-based alternative communication board using word prediction |
| Autor(es): | Roth, Valmir |
| Orientador(es): | Nohama, Percy |
| Palavras-chave: | Equipamentos de autoajuda para pessoas com deficiência Pessoas com deficiência - Meios de comunicação Processamento de imagens - Técnicas digitais Interfaces de usuário (Sistemas de computação) Métodos iterativos (Matemática) Markov, Processos de Algorítmos Processamento de linguagem natural (Computação) Software - Desenvolvimento Métodos de simulação Engenharia biomédica Self-help devices for people with disabilities People with disabilities - Means of communication Image processing - Digital techniques User interfaces (Computer systems) Iterative methods (Mathematics) Markov processes Algorithms Natural language processing (Computer science) Computer software - Development Simulation methods Biomedical engineering |
| Data do documento: | 13-Dez-2019 |
| Editor: | Universidade Tecnológica Federal do Paraná |
| Câmpus: | Curitiba |
| Citação: | ROTH, Valmir. Prancha de comunicação alternativa por imagens empregando predição de palavras. 2019. Dissertação (Mestrado em Engenharia Elétrica e Informática Industrial) - Universidade Tecnológica Federal do Paraná, Curitiba, 2019. |
| Resumo: | A impossibilidade de se comunicar com os outros faz com que as pessoas tenham limitações ou dificuldades só minimizadas com o uso de tecnologias assistivas. Visando proporcionar meios efetivos de comunicação para as pessoas, os pesquisadores da área de Comunicação Alternativa e Ampliada (CAA) estudam e desenvolvem novos métodos e tecnologias. Assim sendo, esta pesquisa tem por objetivo geral desenvolver uma prancha de comunicação por figuras com predição de palavras, a fim de acelerar a seleção de informação e minimizar o esforço do usuário para efetivar a comunicação. O software desenvolvido possui 2000 figuras focadas na cultura brasileira, roda em computadores com Windows 8.1 e versões superiores e também em Smartphones e Tablets com Android 7.0 e versões superiores. Com características singulares em relação aos demais aplicativos gratuitos de CAA disponíveis no Brasil, a Nova Prancha Livre de Comunicação – AMPLISOFT conta com um algoritmo de predição de palavras desenvolvido com base nos Modelos Ocultos de Markov (HMM), o algoritmo (HMM) desenvolvido para uso com nova prancha de comunicação é responsável por filtrar as próximas palavras e gerar uma lista ordenada com base na probabilidade de cada palavra ser selecionada, e realizar a associação das palavras preditas com as figuras do dicionário de figuras. O software da prancha de comunicação exibe as imagens preditas pelo algoritmo distribuindo um total de 12 imagens por prancha, em casos onde são retornados mais de 12 elementos preditos é gerada uma sequencia de pranchas. A associação do algoritmo de predição de palavras HMM ao novo software de CAA propicia ao usuário e ao interlocutor uma experiência única, pois a aplicação foi desenvolvida com foco nas necessidades do usuário deficiente brasileiro. Por este motivo, esta Nova Prancha Livre de Comunicação – AMPLISOFT é flexível quanto à forma de uso e quanto ao contexto em que se deseja trabalhar, tendo em vista que possibilita que sejam utilizados diferentes textos como base para predição das imagens. E a seleção das imagens e expressões pelo usuário pode ser realizada utilizando a técnica de varredura entre linhas e colunas ou com a navegação manual. Ambas as opções são configuráveis no aplicativo, levando em consideração o texto corpus carregado ou selecionado pelo interlocutor. Após a seleção das figuras, o usuário tem também a opção de exteriorizar o conteúdo em forma de áudio, tornando a comunicação mais natural. Os resultados obtidos nos testes de bancada e nos ensaios in vivo com o algoritmo e a Prancha desenvolvida nesta pesquisa, mostram que o uso do algoritmo de predição de palavras associado a predição de figuras diminuí consideravelmente a dificuldade na localização das figuras desejadas para seleção na prancha de comunicação, melhorando a eficiência na criação de mensagens e reduzindo o tempo necessário para localização das figuras. Com ela, brasileiros com necessidades complexas de comunicação podem relacionar-se com outras pessoas de uma forma interativa e intensiva. |
| Abstract: | The inability to communicate with others means that people can only prevent and hinder the use of assistive technologies. In order to provide effective means of communication for these people, researchers on Alternative and Augmentative Communication (AAC) field investigate and develop new methods and technologies. Thus, in this research, we aim to develop a pictures-based communication board using word prediction to speed up information selection and minimize the user's effort to communicate effectively. The developed software has 2000 figures focused on the Brazilian culture, runs on computers running Windows 8.1 and higher versions and also smartphones and tablets running Android 7.0 and higher. With exclusive features over other free AAC applications available in Brazil, New Free Communication Board - AMPLISOFT implements a word prediction algorithm developed based on Markov's Hidden Models (Markov's Hidden Models - HMM). It is pointed by the literature as one of the most indicated word prediction techniques. A combination of the HMM word prediction algorithm and the new AAC software provides a unique experience for the user and interlocutors because it was specially designed for disabled Brazilian. For this reason, the new free communication board is flexible as to its form of use and the context in which it is intended to work. It allows different texts to be used as a basis for images prediction. And the selection of user images and expressions can be performed applying row and column scanning technique or with manual navigation. Both options are configurable in the software taking into account the corpus loaded or selected by the interlocutor. After selecting the pictures, the user also has the option of presenting the content in audio mode, thus facilitating communication. The results obtained from the tests performed on the development bench, and also the in vivo tests of the developed board, clearly evidence of the ease of use and efficiency in creating messages that can be externalized in audio form. With this application, Brazilians with severe communication difficulties can be in relation with others in an interactive and intensive way. |
| URI: | http://repositorio.utfpr.edu.br/jspui/handle/1/4808 |
| Aparece nas coleções: | CT - Programa de Pós-Graduação em Engenharia Elétrica e Informática Industrial |
Arquivos associados a este item:
| Arquivo | Descrição | Tamanho | Formato | |
|---|---|---|---|---|
| CT_CPGEI_M_Roth,_Valmir_2019.pdf | 2,28 MB | Adobe PDF |  Visualizar/Abrir |
Os itens no repositório estão protegidos por copyright, com todos os direitos reservados, salvo quando é indicado o contrário.