Nos complace anunciar la lectura preliminar pública de View Sharing multiplataforma. Arreglado hoy, permite a los proveedores de datos compartir vistas entre diferentes plataformas, nubes y regiones, promoviendo un ecosistema de datos descubierto e interoperable.
Compartir vistas ha sido útil; Otros proveedores igualmente lo hacen. Pero hasta ahora, se ha acotado principalmente a la misma plataforma. Puede compartir vistas en el interior de una plataforma, pero no entre múltiples plataformas y nubes. Databricks resuelve este problema compartiendo vistas entre plataformas y le permite compartir vistas sin problemas en diferentes entornos. Esto cambia las reglas del deporte porque amplía el envergadura de los proveedores de datos y evita la dependencia del proveedor para los consumidores de datos, lo que hace que la colaboración sea más viable y rápida.
El intercambio multiplataforma se alinea con la visión de intercambio descubierto de Databricks al permitir un intercambio de datos seguro y fluido entre diferentes plataformas, nubes y regiones.
Comprender la visualización compartida
Para comprender el uso compartido de vistas, primero comprendamos vistas. En Databricks, las vistas son representaciones de solo lección de datos creados a partir de tablas u otras vistas. Almacenan texto de consulta pero no los datos en sí. Las vistas son parte del Catálogo de dispositivo
Compartir vistas permite a los usuarios compartir vistas utilizando el protocolo Delta Sharing. Delta Sharing es el primer protocolo descubierto de la industria para el intercambio seguro de datos, lo que simplifica el intercambio de datos con otras organizaciones independientemente de las plataformas de datos que utilicen. Compartir vistas promueve la reutilización y reduce la exceso, ya que varios usuarios pueden ingresar y utilizar las mismas vistas para el observación.
Anteriormente, cuando se compartía una horizonte entre cuentas de Databricks, los consumidores podían consultarla usando solo SQL sin servidor de Databricks. Databricks Serverless SQL funciona en los tres principales proveedores de cúmulo: AWS, Azure y Google Cloud Platform (GCP), por lo que las vistas se pueden compartir entre nubes.
Ahora, con el uso compartido de vistas entre plataformas, los consumidores de datos pueden disfrutar cualquier tipo de clúster de Databricks o incluso utilizar clientes abiertos Delta Sharing para ingresar y consultar vistas compartidas. Los clientes Open Delta Sharing son herramientas o plataformas que admiten el protocolo Delta Sharing, lo que permite a los usuarios ingresar a vistas compartidas sin pobreza de usar Databricks. Estos clientes incluyen sistemas populares como Apache Spark™, Pandas, Power BI, Tableau y otros. Esto hace posible que los usuarios de todas las plataformas, es afirmar, que no estén en Databricks, sigan accediendo y consultando las vistas compartidas a través de Delta Sharing.
Echemos un vistazo a esta demostración para ver el uso compartido de vistas multiplataforma en obra.
Casos de uso
Intercambio de ladrillos de datos a ladrillos de datos (D2D)
En este atmósfera, dos clientes de Databricks pueden compartir vistas sin problemas en el interior del ecosistema de Databricks. ¿Por qué es esto importante? Las organizaciones colaboran con socios que pueden estar en diferentes nubes y en diferentes regiones y desean compartir vistas con clientes/socios a través de nubes y regiones. Al disfrutar la tecnología Delta Sharing, pueden compartir vistas de forma transparente y segura, sin realizar copias duplicadas de los datos.
Ladrillos de datos para compartir de forma abierta (D2O)
En este atmósfera, los clientes de Databricks pueden compartir vistas con destinatarios externos que no usan Databricks. El uso compartido de vistas entre plataformas admite conectores abiertos (como Apache Spark™, Pandas, Power BI, Tableau, etc.), lo que permite a los destinatarios ingresar a vistas compartidas a través del protocolo Delta Sharing. Esta capacidad es particularmente beneficiosa para analistas de negocios y usuarios de segmento de negocios que requieren llegada simplificado a los datos sin pobreza de interactuar directamente con plataformas de datos complejas.
Los proveedores de datos de Databricks Marketplace se benefician del intercambio de vistas multiplataforma al ampliar significativamente su envergadura en el mercado y sus oportunidades de monetización. Esta capacidad les permite compartir vistas con una audiencia más amplia, incluidos clientes que no utilizan Databricks, aumentando así su pulvínulo de clientes potenciales. Los consumidores de datos no se limitan a consultar vistas desde la plataforma Databricks, evitando el obstrucción con Databricks.
Compartir vistas multiplataforma cambia las reglas del deporte para nuestros clientes. Arrostrar el intercambio de datos sin copia a empresas complejas a escalera requiere flexibilidad. La capacidad de compartir vistas entre plataformas nos permite elogiar los beneficios de seguridad y rendimiento de Delta Sharing a más clientes, ayudándoles a desbloquear valía de los datos de sus clientes más rápidamente.
— Derek Slager, CTO y cofundador de Amperity
¿Qué hay por delante?
En los próximos meses, los lectores pueden esperar que Databricks introduzca varias funciones avanzadas para compartir datos. Las próximas características incluyen Compartiendo para la Pacto Lakehouseque permite a los proveedores de datos compartir datos directamente desde varias plataformas (por ejemplo, Amazon Redshift, Azure Synapse, Google BigQuery, Snowflake) sin pobreza de replicación.
Adicionalmente, el soporte D2O OAuth mejorará la seguridad al permitir que los destinatarios se autentiquen utilizando tokens OAuth de sus proveedores de identidad (IdP) de confianza. Adicionalmente, el intercambio de vistas materializadas y Delta Live Tables permitirá una distribución valioso de los resultados de consultas precalculados y la transmisión de datos, proporcionando datos nuevos con mejor rendimiento y menores costos.
Empezando
El uso compartido de vistas multiplataforma está apto hoy en lectura preliminar pública para los clientes de AWS, GCP y Azure. Formarse cómo puede utilizar el protocolo de uso compartido descubierto Delta Sharing para compartir datos desde su espacio de trabajo de Databricks competente para Unity Catalog con cualquier usufructuario en cualquier plataforma informática, en cualquier división