Hoy se marca un hito importante para los estándares abiertos y la comunidad de datos en universal. Estamos trabajando con Microsoft para integrar los datos administrados tanto en Unity Catalog como en OneLake utilizando estándares abiertos. La observación Unity Catalog Open API proporciona una interfaz para trocar datos en uno y otro sentidos, sin copia, para rajar el llegada a todo el ecosistema de Lakehouse para motores en cualquiera de las plataformas.
Durante casi una división, Databricks y Microsoft se han asociado para ayudar a las organizaciones a desbloquear el valía de sus datos a través de la comprensión y flexibilidad de Lakehouse. Hoy, esa asociación da un paso más y ofrece a los clientes más opciones sobre cómo entrar y mandar los datos en todas las plataformas.
El camino cerca de la interoperabilidad abierta
A medida que se adoptaron formatos de mesa abierta como Delta Lake e Iceberg, surgieron nuevos silos a nivel de catálogo. Para topar esto, Databricks lanzó las API abiertas de Unity Catalog, estableciendo un típico libre para la gobernanza unificada de datos e inteligencia químico, al tiempo que es totalmente compatible con la API del catálogo REST de Iceberg para datos tabulares. Este enfoque de API dual permite a las organizaciones adoptar las mejores soluciones de su clase y evitar la dependencia de proveedores mientras comparten datos sin problemas entre muchas plataformas de datos y aplicaciones SaaS. Todavía introdujimos la convenio de catálogos para proporcionar una audiencia única y gobernada en todas las plataformas de datos. Este maniquí, API abiertas que impulsan la convenio de catálogos, se ha convertido en el típico de la industria para la interoperabilidad.
Hoy, estamos emocionados de ver esta visión abierta validada por nuestros socios de Microsoft.
Microsoft agrega soporte para las API abiertas de Unity Catalog
Como anunciamos con nuestros socios de Microsoft hoynuestra colaboración se está profundizando.
Microsoft ya ha adjunto soporte para deletrear desde Azure Databricks con Duplicación de OneLakelo que permite a los motores Fabric entrar sin problemas a todos los datos administrados en Unity Catalog. A diferencia de otras integraciones de OneLake con plataformas propietarias, esto hace que todos los datos de Unity Catalog, incluidas las tablas de veterano rendimiento, estén disponibles en OneLake sin copiar, cambiar código ni costos adicionales.
Hoy en día, Microsoft y Databricks están ampliando su comprensión al integrarse de forma aún más nativa. Con Microsoft OneLake agregando soporte para el típico Unity Catalog Open API, los usuarios de Azure Databricks podrán deletrear datos de OneLake sin problemas.
Con OneLake agregando soporte para API de catálogo libre, incluidas Iceberg REST y Unity Catalog Open API, Microsoft está haciendo que los datos estructurados y no estructurados de OneLake de servicios como Dynamics, Dataverse, Blob store, etc. sean accesibles de forma nativa para todo el ecosistema libre de Lakehouse, incluido Databricks.
Databricks se plinto en la cojín abierta
Aprovechando esta capacidad ampliada, Databricks está agregando soporte para que todos los datos de OneLake estén disponibles sin problemas en Unity Catalog.
Esto permite la recital sin copia de los datos de OneLake desde Databricks, lo que garantiza una interoperabilidad y un llegada perfectos entre ambas plataformas, lo que brinda a los clientes de Databricks llegada a todos sus datos en el ecosistema de Microsoft para impulsar sus cargas de trabajo más avanzadas de inteligencia químico, enseñanza inevitable e ingeniería de datos a gran escalera.
Integración del catálogo
- Leída del catálogo de Unity en Fabric: habitable con carácter universal ahora
Microsoft ha agresivo la duplicación de Azure Databricks. Los clientes pueden reverberar datos de Azure Databricks en OneLakea través de Unity Catalog, lo que garantiza que TODOS los datos administrados por Azure Databricks estén disponibles instantáneamente en las cargas de trabajo de Microsoft Fabric. Ambas plataformas pueden trabajar con la misma copia de datos sin movimiento de datos. - Leída de OneLake en Azure Databricks – EOY 2025
Esta nueva capacidad permite a Azure Databricks deletrear datos de OneLake a través de sus API abiertas de Unity Catalog y permite que todos sus datos de OneLake se aprovechen sin problemas en Databricks. Los clientes pueden crear conexiones de catálogo de Unity a OneLake basadas en identidades administradas desde EntraID y pueden contar sin problemas medios de datos desde cualquier espacio de trabajo de Fabric, directamente como un catálogo en Unity.
Conexión a datos de OneLake en Azure Databricks
El futuro está libre
Este hito refleja hasta qué punto ha llegado la industria cerca de un ecosistema de datos libre e interoperable. Los clientes ya no necesitan designar entre innovación e interoperabilidad: pueden tener ambas.
Ahora que Microsoft adopta el típico de catálogo libre, estamos entusiasmados de continuar construyendo el futuro de los datos y la IA sobre esta cojín. Estén atentos a más anuncios y actualizaciones de la hoja de ruta, incluida la compatibilidad con la escritura de datos de Azure Databricks directamente en OneLake, a medida que profundizamos nuestra integración.