Ir al contenido principal

Chat de IA en streaming con Model Serving

Crea una experiencia de chat de IA en streaming con AI SDK y endpoints de Databricks Model Serving.

Vista previa de Chat de IA en streaming con Model Serving

Crea con IA

  1. Copia el prompt siguiente
  2. Pégalo en Cursor, Claude Code, Codex o cualquier agente de programación
  3. Tu agente lo crea y te hace preguntas durante el proceso para que el resultado sea exactamente el que quieres

¿No conoces las plantillas? Más información aquí

Al terminar, tendrás:

  • Una interfaz de chat con streaming en tiempo real en tu Databricks App
  • Integración con los endpoints de modelos fundacionales de Databricks Model Serving
  • El transporte de chat del lado del servidor y la UI de chat del cliente conectados entre sí
  • Una aplicación desplegada en la que los usuarios pueden conversar con un LLM alojado en Databricks

Prerequisites

Completa primero estos templates de requisitos previos:

Después, verifica que estas funcionalidades del workspace de Databricks estén habilitadas. Si alguna comprobación falla, pide al administrador de tu workspace que habilite la funcionalidad.

  • Un endpoint de chat compatible con OpenAI en Model Serving. Ejecuta databricks serving-endpoints list --profile <PROFILE> y confirma que aparezca al menos un endpoint de chat compatible con OpenAI (por ejemplo, databricks-gpt-5-4-mini, databricks-meta-llama-3-3-70b-instruct o databricks-claude-sonnet-4-6). La disponibilidad de endpoints varía según el workspace y la región; anota el que vayas a definir como DATABRICKS_ENDPOINT.
  • Databricks Apps habilitado. Ejecuta databricks apps list --profile <PROFILE> y confirma que el comando se ejecute correctamente (una lista vacía es válida). Un error de permisos o de not enabled significa que Apps no está disponible para esta identidad en este workspace.

Explora más plantillas

Databricks Developer Hub

¿Todo listo para lanzar tu próxima aplicación basada en agentes en minutos?

Leer la documentación