Construya un Agente de Transmisión en Vivo Multimodal con ADK

Resumen

Descubre cómo construir agentes de inteligencia artificial multimodal en tiempo real utilizando el Kit de Desarrollo de Agentes (ADK) de Google, que simplifica procesos complejos como las solicitudes en cola y la gestión de eventos en comparación con la construcción directamente con la API de Transmisión en Vivo de Gemini.

Programa de estudio

• Introducción a la IA Multimodal y Agentes en Tiempo Real
Visión general de la IA Multimodal
Comprensión del Procesamiento en Tiempo Real
Introducción al Kit de Desarrollo de Agentes (ADK) de Google
• Configuración de su Entorno de Desarrollo
Instalación de Herramientas y Dependencias Necesarias
Navegación en ADK y Configuración Básica
• Fundamentos de ADK
Características Clave y Capacidades
Comprensión de la API de Transmisión en Vivo de Geminis
Beneficios de Usar ADK en lugar de Llamadas Directas a la API
• Diseño de su Agente de Transmisión Multimodal
Definición de Casos de Uso y Requisitos
Arquitectura de una Estructura de Agente Multimodal
• Implementación de Solicitudes en Cola con ADK
Simplificación de la Gestión de Colas
Manejo de Solicitudes Concurrentes de Usuarios
• Gestión de Eventos y Sincronización
Gestión de Eventos Asíncronos
Sincronización de Entrada desde Múltiples Modalidades
• Integración con la API de Transmisiones en Vivo
Comprensión de Flujos de Datos en Vivo
Interfaz de ADK con la API para Actualizaciones en Tiempo Real
• Mejora de las Interacciones del Agente
Incorporación de Procesamiento de Voz y Texto
Adición de Capacidades de Reconocimiento Visual
• Pruebas y Depuración de Agentes Multimodales
Estrategias para Pruebas Efectivas
Depuración de Problemas Comunes en Sistemas en Tiempo Real
• Despliegue de su Agente
Preparación para el Despliegue
Asegurar Escalabilidad y Robustez
• Resumen del Curso y Proyecto Capstone
Resumen de Conceptos y Habilidades Clave
Proyecto Capstone: Construir y Desplegar un Agente Multimodal Totalmente Funcional Usando ADK

Asignaturas

Ciencias de la Computación