Asistente de voz para la monitorización del estado de una planta mediante un sistema basado en IoT

Xie, Hongyan and Shen, Dina (2023). Asistente de voz para la monitorización del estado de una planta mediante un sistema basado en IoT. Proyecto Fin de Carrera / Trabajo Fin de Grado, E.T.S.I. de Sistemas Informáticos (UPM), Madrid.

Description

Title: Asistente de voz para la monitorización del estado de una planta mediante un sistema basado en IoT
Author/s:
  • Xie, Hongyan
  • Shen, Dina
Contributor/s:
Item Type: Final Project
Degree: Grado en Ingeniería de Computadores
Date: April 2023
Subjects:
Freetext Keywords: Chatbot; Inteligencia artificial; Plataforma Thingsboard; IoT; API
Faculty: E.T.S.I. de Sistemas Informáticos (UPM)
Department: Sistemas Informáticos
Creative Commons Licenses: Recognition - No derivative works - Non commercial

Full text

[thumbnail of TFG_HONGYAN_XIE.pdf] PDF - Requires a PDF viewer, such as GSview, Xpdf or Adobe Acrobat Reader
Download (3MB)

Abstract

A lo largo del documento se muestran diferentes etapas utilizadas para su desarrollo. Estas fases incluyen. Análisis del problema a resolver. Indicando las técnicas y herramientas que se utilizarán para el desarrollo. El estudio de las diferentes posibilidades de desarrollo del proyecto. Los problemas y soluciones encontrados en el proyecto. Las pruebas realizadas para verificar el correcto funcionamiento.

Este proyecto demuestra cómo los datos del sonido ambiente pueden ser leídos por un micrófono y procesados por un algoritmo de interfaz de audio (AFE) para generar estados de activación. El proyecto utiliza Google Cloud Speech-To-Text y Google Cloud Text-To-Speech para convertir entre texto y voz.

El audio capturado se convierte en texto en lenguaje español. El texto obtenido se analiza, se extraen los componentes de la frase y se hace una petición al servidor de thingsboard para el contenido específico. La respuesta final se da al usuario en forma de voz.

Abstract:

Different stages used for its development are shown throughout the document. These stages include. Analysis of the problem to be solved. Indicating the techniques and tools to be used for development. The study of the different possibilities for the development of the project. The problems and solutions found in the project. The tests were carried out to verify correct operation.

This project demonstrates how ambient sound data can be read by a microphone and processed by an audio interface algorithm (AFE) to generate activation states. The project uses Google Cloud Speech-To-Text and Google Cloud Text-To-Speech to convert between text and speech.

Captured audio is converted into Spanish text. The obtained text is parsed, sentence components are extracted and a request is made to the thingsboard server for the specific content. The final answer is given to the user in the form of a voice.

More information

Item ID: 73427
DC Identifier: https://oa.upm.es/73427/
OAI Identifier: oai:oa.upm.es:73427
Deposited by: Biblioteca Universitaria Campus Sur
Deposited on: 20 Apr 2023 06:03
Last Modified: 07 Sep 2023 16:56
  • Logo InvestigaM (UPM)
  • Logo GEOUP4
  • Logo Open Access
  • Open Access
  • Logo Sherpa/Romeo
    Check whether the anglo-saxon journal in which you have published an article allows you to also publish it under open access.
  • Logo Dulcinea
    Check whether the spanish journal in which you have published an article allows you to also publish it under open access.
  • Logo de Recolecta
  • Logo del Observatorio I+D+i UPM
  • Logo de OpenCourseWare UPM