Extracción de Datos Estructurados de Entradas Multimodales: Enfoques Neurales y Neuro-Simbólicos

Resumen

Explora técnicas avanzadas para extraer datos estructurados de fuentes multimodales, centrándote en métodos neuronales, enfoques neuro-simbólicos y soluciones basadas en modelos de lenguaje de gran escala (LLM) para procesar elementos visuales y de texto integrados.

Programa de estudio

• Introducción a los Datos Multi-Modales
Visión General de Fuentes de Entrada Multi-Modales
Desafíos en la Extracción de Datos Estructurados de Entradas Multi-Modales
• Métodos Neurales para Datos Multi-Modales
Arquitecturas de Aprendizaje Profundo para el Procesamiento Multi-Modal
Redes Convolucionales y Recurrentes en el Procesamiento de Imágenes y Texto
Modelos Transformer para la Fusión Multi-Modal
• Enfoques Neuro-Simbólicos
Introducción a los Sistemas Neuro-Simbólicos
Integración de Redes Neuronales y Razonamiento Simbólico
Estudios de Caso en Aprendizaje Neuro-Simbólico a partir de Datos Multi-Modales
• Modelos de Lenguaje a Gran Escala (LLM) en Contextos Multi-Modales
Funcionalidades de LLMs como GPT para el Procesamiento Multi-Modal
Técnicas Basadas en LLM para la Integración de Datos Textuales y Visuales
• Extracción de Datos Estructurados de Entradas Integradas
Técnicas para la Representación y Fusión de Datos
Generación de Datos Estructurados a partir de Información Textual y Visual Combinada
• Aplicaciones y Estudios de Caso
Aplicaciones Prácticas: Robótica, Vehículos Autónomos y Salud
Estudios de Caso: Implementación en el Mundo Real de Técnicas de Extracción Multi-Modal
• Implicaciones Éticas y Sociales
Sesgo e Imparcialidad en Sistemas Multi-Modales
Preocupaciones sobre la Privacidad en la Recolección y Procesamiento de Datos Multi-Modales
• Proyectos Prácticos
Implementación de un Sistema de Extracción de Datos Multi-Modal
Experiencia Práctica con Herramientas Neurales y Neuro-Simbólicas
• Direcciones Futuras en el Procesamiento de Datos Multi-Modales
Tendencias y Tecnologías Emergentes
Fronteras de Investigación en Métodos Neurales y Neuro-Simbólicos para Entradas Multi-Modales

Asignaturas

Ciencia de Datos