GUÍA de empresas

Ladrillos de datos

Databricks es una plataforma de datos e inteligencia artificial que unifica la ingeniería de datos, el análisis y el aprendizaje automático en una única base de "casa del lago".

  • 2 minutos de lectura
  • Última actualización
En esta pagina2 minutos de lectura
  1. Descripción general
  2. Buceo profundo
  3. Impacto Estratégico
  4. El futuro de los ladrillos de datos
  5. Implementación en el mundo real
  6. Riesgos y barandillas
  7. Hoja de ruta de implementación
  8. Sigue explorando
  9. Preguntas frecuentes

Descripción general

It matters because it lets companies manage huge datasets and build AI directly where their data already lives.

Buceo profundo

Databricks fue fundado en 2013 por los creadores originales de Apache Spark, incluidos Ali Ghodsi y Matei Zaharia, del AMPLab de UC Berkeley. Su idea distintiva es la 'casa del lago', que combina el almacenamiento flexible y económico de un lago de datos con la confiabilidad y el rendimiento de un almacén de datos, habilitado por el formato de tabla abierta de Delta Lake. En la parte superior se encuentra Unity Catalog para la gobernanza, MLflow para el seguimiento de experimentos y Databricks Runtime creado en Spark. En 2023, Databricks adquirió MosaicML y luego lanzó DBRX, un modelo de lenguaje abierto de gran tamaño, lo que indica un fuerte giro hacia la IA generativa. La plataforma ahora comercializa una 'Plataforma de inteligencia de datos' para crear y prestar servicios a agentes de IA en datos empresariales.

Impacto Estratégico

Estrategia del proveedor

Las hojas de ruta de los proveedores influyen en las funciones que su equipo puede desarrollar a continuación.

Costo y presupuesto

Los términos comerciales y las opciones de implementación afectan los costos y riesgos a largo plazo.

Riesgo y seguridad

Los incentivos de las empresas dan forma a los incumplimientos de los productos, la postura de seguridad y la apertura.

El futuro de los ladrillos de datos

Databricks está compitiendo por ser el lugar donde las empresas construyen IA a partir de sus propios datos, compitiendo con Snowflake y los gigantes de la nube. Espere una gran inversión en agentes de inteligencia artificial, recuperación gobernada y herramientas que permitan a los no expertos consultar datos en lenguaje natural. Sus apuestas de código abierto (Delta Lake, MLflow, DBRX) tienen como objetivo asegurar la participación mental mientras monetizan el servicio y la gobernanza. Con una valoración privada altísima y una constante especulación de IPO, Databricks está posicionando la casa del lago como el sustrato predeterminado para la IA generativa empresarial.

Implementación en el mundo real

Un minorista ejecuta trabajos nocturnos de Spark en Databricks para procesar miles de millones de registros de ventas en tablas limpias para realizar pronósticos.

Un equipo de ciencia de datos utiliza MLflow en Databricks para realizar un seguimiento de los experimentos e implementar un modelo de predicción de abandono.

Un banco crea un chatbot gobernado con búsqueda vectorial Mosaic AI que responde preguntas sobre documentos de políticas internas.

Un grupo de análisis utiliza Delta Lake para proporcionar a un lago de datos desordenado tablas transaccionales confiables para paneles de BI.

Riesgos y barandillas

  • Los anuncios de lanzamiento pueden superar la estabilidad en los flujos de trabajo de producción reales.

  • Los precios de API o los cambios de políticas pueden romper los supuestos de la noche a la mañana.

  • La dependencia de un único proveedor aumenta los costos de bloqueo y migración.

Hoja de ruta de implementación

  1. Evalúe proveedores utilizando sus propias tareas y conjuntos de datos.

  2. Revise los términos legales, de seguridad y de privacidad antes de la integración.

  3. Mantenga un plan alternativo entre modelos o proveedores.

  4. Supervise las notas de la versión para que los cambios en la hoja de ruta no sorprendan a los equipos.

Sigue explorando

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Databricks quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Iniciar prueba

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Preguntas frecuentes

What is Databricks?

Databricks es una plataforma de datos e inteligencia artificial que unifica la ingeniería de datos, el análisis y el aprendizaje automático en una única base de "casa del lago". Es importante porque permite a las empresas gestionar enormes conjuntos de datos y crear IA directamente donde ya se encuentran sus datos.

¿Databricks fue fundado por los creadores originales de qué proyecto de código abierto?

Databricks fue iniciado en 2013 por los creadores de Apache Spark del AMPLab de UC Berkeley.

¿Qué combina la arquitectura de la 'casa del lago'?

La casa del lago combina almacenamiento en lago flexible y económico con confiabilidad y velocidad de almacén.

¿Qué formato de tabla abierta proporciona transacciones ACID a los lagos de datos de Databricks?

Delta Lake agrega un registro de transacciones y garantías ACID además del almacenamiento de objetos económico.

¿Para qué se utiliza MLflow en Databricks?

MLflow estandariza las ejecuciones de seguimiento, los modelos de empaquetado y la gestión de la implementación.

¿Qué adquisición y modelo abierto señalaron el giro de Databricks hacia la IA generativa?

Databricks adquirió MosaicML en 2023 y lanzó el modelo DBRX abierto, lo que marca su impulso generativo de IA.