Identificação de medicamentos por visão computacional com suporte auditivo para pessoas com deficiência visual: uma solução integrada com OCR, TTS e ChatGPT

Abstract

Este trabalho apresenta um aplicativo móvel que utiliza técnicas de visão computacional e inteligência artificial para identificar medicamentos por meio da câmera de dispositivos móveis. A solução extrai informações dos rótulos através de OCR (Optical Character Recognition), processa esses dados com IA para reconhecimento e validação dos medicamentos e utiliza a tecnologia Text-to-Speech (TTS) para fornecer descrições detalhadas por áudio. Adicionalmente, o sistema é integrado à API do ChatGPT, que gera resumos claros e objetivos sobre os medicamentos identificados, facilitando o acesso e garantindo segurança para pessoas com deficiência visual. O método utilizado incluiu a aplicação do questionário SUS e entrevistas com 03 pessoas do público alvo. As análises foram feitas através da descrição dos principais pontos nos resultados do questionário e análise de conteúdo para as entrevistas, identificando fatores que destacavam a efetividade da aplicação em relação aos recursos tecnológicos e melhorias futuras. Os resultados se mostraram promissores, apontando que as funcionalidades integradas ao protótipo ofereceram viabilidade de uso, assim como algumas sugestões foram feitas pelos usuários.