Para los fabricantes actuales, los flujos de trabajo optimizados y automatizados son cruciales para pasar desafíos como la diligencia manual de datos y el tiempo de inactividad de los equipos. Al beneficiarse los flujos de trabajo automatizados y permitir el mantenimiento predictivo, los fabricantes pueden obtener información sobre la producción en tiempo positivo que reduce las ineficiencias y el desperdicio. La asesinato de silos de datos y la capacidad de ascender los observación permiten una mejor toma de decisiones y respaldan el creciente comba de datos operativos. En un panorama basado en datos, los flujos de trabajo automatizados se han vuelto esenciales para el éxito empresarial, lo que permite a los profesionales de datos ocurrir de la resolución reactiva de problemas a la innovación proactiva.
Flujos de trabajo de ladrillos de datosla aparejo de orquestación unificada para datos, observación e inteligencia industrial, puede ayudar a satisfacer las crecientes demandas de los equipos de datos al puntualizar, tener la llave de la despensa y monitorear fácilmente flujos de trabajo automatizados para ETL, observación y procesos de educación mecánico. Totalmente integrado con la plataforma de inteligencia de datos, Workflows ofrece una experiencia simple de definición de flujo de trabajo, capacidades avanzadas de observabilidad y incorporación confiabilidad. Workflows proporciona una amplia variedad de tipos de tareas, incluidos cuadernos, archivos JAR, scripts de Python, paneles y consultas SQL de Databricks, canalizaciones de Delta Live Tables, tareas dbt y más. Los flujos de trabajo todavía incluyen avances recientes en capacidades—desde tabla activada por datos y venida del archivo automatización hasta la gestación de sintaxis cron impulsada por IA y computación sin servidor.
En este blog, revisamos cómo los flujos de trabajo de Databricks permitieron a los líderes de fabricación como Corning, Volvo y Cox Automotive simplificar sus canalizaciones de datos, mejorar la información en tiempo positivo y compendiar los gastos generales de mantenimiento. Al utilizar Workflows, sus equipos de datos han cambiado su enfoque en dirección a la innovación. Los resultados incluyen una mejor visibilidad del inventario, una anciano eficiencia operativa y mejores experiencias para los clientes, lo que muestra cómo los flujos de trabajo de Databricks pueden beneficiar al sector manufacturero.
Al utilizar los flujos de trabajo de Databricks, estas empresas pudieron automatizar el flujo de datos desde los dispositivos de IoT en la industria hasta los modelos de mantenimiento predictivo, difundir cronogramas y alertas con precisión milimétrica y ascender las cargas de trabajo de observación para manejar volúmenes masivos de datos de sus operaciones. Como resultado, tuvieron cambios significativos en sus productos: entregaron cronogramas de producción optimizados, predijeron fallas en los equipos antiguamente de que ocurrieran y tuvieron una presencia en tiempo positivo de la condena de suministro para mandar las interrupciones de guisa proactiva y certificar que los productos llegaran a tiempo. Profundicemos en algunas historias de éxito de clientes de fabricación.
La orquestación de datos de un extremo a otro de Corning con Databricks Workflows impulsa la eficiencia operativa
Corning positivamente ha revolucionado sus procesos de diligencia de datos con Databricks Workflows. Corning es un reformador en ciencia de materiales y depende de los datos para impulsar innovaciones y patentes. Los ingenieros de Corning utilizaron anteriormente Apache Airflow como aparejo de orquestación de datos, pero migraron por completo a Databricks Workflows. Este cambio permitió a Corning mandar aproximadamente 2500 trabajos (rodeando de 5 petabytes de datos) y dar soporte a 900 usuarios globales activos. Las capacidades de automatización de la plataforma simplificaron la conservación de datos, rompieron silos y permitieron a los ingenieros y científicos de datos procesar grandes cantidades de datos a escalera mientras establecían flujos de trabajo repetibles y reutilizables. Estos avances mejoraron la eficiencia operativa y brindaron conocimientos más rápidos y cruciales para la innovación.
«Los flujos de trabajo de Databricks desempeñan un papel fundamental al permitirnos ejecutar repetidamente, según nuestro propio cronograma, una orquestación completa de procesos, con un flujo de datos de un extremo a otro a través de la plataforma de inteligencia de datos».
— Jibreal Hamenoo, ingeniero principal de sistemas, ingeniería de datos, Corning Incorporated
Con Databricks Workflows, Corning mejoró el monitoreo y la diligencia de costos al evaluar el uso de bienes e identificar rápidamente oportunidades de optimización. La observabilidad mejorada permitió a los equipos de datos invadir de guisa proactiva problemas potenciales y reparar subconjuntos de tareas sin reiniciar flujos de trabajo completos. El resultado fue un aumento significativo en la agilidad, lo que permitió a Corning contestar rápidamente a los cambios del mercado, mejorar la confiabilidad de la condena de suministro y mejorar la experiencia del cliente.
Renovación de la condena de suministro de Volvo: información de inventario en tiempo positivo con flujos de trabajo de Databricks
El Conjunto Volvo ha cedido pasos significativos en la optimización de sus operaciones al cambiar de Azure Data Factory (ADF) a Databricks Workflows. Este cambio agiliza la diligencia de inventario para su enorme condena de suministro total, desde el proveedor hasta el distribuidor de camiones. Cada año se venden casi 200.000 camiones Volvo nuevos y hay millones más en circulación que requieren cientos de miles de piezas de repuesto repartidas en almacenes de todo el mundo. Con el procesamiento de datos en tiempo positivo, Volvo puede monitorear los niveles de inventario continuamente en oficio de esperar a que llegue la escasez. En un negocio de condena de suministro total, cada minuto cuenta y no quieren que sus datos queden obsoletos rápidamente. Esta posibilidad proactiva y unificada permite a sus ingenieros de datos predecir las evacuación de inventario con anciano precisión, garantizando una disponibilidad óptima de las piezas y minimizando el exceso de existencias.
“Workflows ha sido un gran orquestador para nosotros. Podemos consultar todos los datos utilizando API de bases de datos y crear un mensaje de seguimiento para ver si un trabajo está fallando, cuánto tiempo lleva en promedio y si lleva más que el promedio para ese trabajo”.
— Negro Magri, ingeniero de datos sénior, Transporte del mercado de servicios de Volvo Group
Al integrar los flujos de trabajo de Databricks con Delta Live Tables (DLT), Volvo simplificó las operaciones de su condena de suministro total. Los flujos de trabajo automatizados permiten a los equipos de la condena de suministro de Volvo predecir mejor las evacuación de inventario, certificar una disponibilidad óptima de piezas y minimizar el exceso de existencias. La combinación de DLT y flujos de trabajo no solo mejoró la eficiencia operativa, logrando hasta un 40 % más de eficiencia en el manejo de grandes volúmenes de datos, sino que todavía permitió a Volvo adaptarse rápidamente a las demandas de los clientes, impulsando una abastecimiento más inteligente y mejorando significativamente el rendimiento universal de su condena de suministro.
Cox Automotive aumenta la eficiencia y agilidad de los datos con Databricks Workflows
Cox Automotriz ha transformado sus operaciones de datos con Databricks Workflows, empleando flujos de trabajo automatizados para mandar datos a gran escalera sin cuellos de botella.
Cox Automotive Europe es parte de Cox Automotive, la ordenamiento de servicios automotrices más holgado del mundo que tiene la tarea de modificar la forma en que el mundo transacción, vende, posee y utiliza vehículos. El equipo de servicios de datos empresariales mantiene una plataforma de datos que atiende principalmente a clientes internos en todas las unidades de negocios, aunque todavía mantiene algunas fuentes de datos para terceros. El equipo recopila datos de múltiples fuentes internas y unidades de negocio.
«Utilizamos Databricks Workflows como nuestra aparejo de orquestación predeterminada para realizar ETL y permitir la automatización de aproximadamente 300 trabajos, de los cuales aproximadamente 120 están programados para ejecutarse regularmente».
— Robert Hamlet, ingeniero de datos líder, servicios de datos empresariales, Cox Automotive
Hoy en día se procesan grandes cantidades de datos en los procesos de producción y los trabajos programados provienen de diferentes áreas, tanto en el interior como fuera de la empresa. Hamlet utiliza flujos de trabajo de Databricks para entregar datos al equipo de ciencia de datos, al equipo interno de gestación de informes de datos a través de Tableau o directamente a Power BI. Los flujos de trabajo brindan observabilidad en cada ejecución de flujo de trabajo y cada notificación de equivocación para que puedan anticiparse a los problemas rápidamente y solucionarlos antiguamente de que el equipo de ciencia de datos se vea afectado.
Databricks Workflows simplifica las operaciones de datos de Cox Automotive al automatizar las tareas de ETL y saludar observabilidad vanguardia en todo el proceso. Esta integración permite a los ingenieros de datos certificar un flujo de datos fluido, detectar problemas rápidamente y optimizar el rendimiento. Con los flujos de trabajo que organizan la entrega de datos en tiempo positivo a las herramientas de observación, Cox puede tomar decisiones más rápidas basadas en datos, optimizar las operaciones y mejorar la capacidad de respuesta a los cambios del mercado, impulsando la eficiencia y la agilidad.
Prontuario
Estas historias de éxito de los líderes mundiales en fabricación Corning, Volvo y Cox Automotive demuestran el impacto mensurable del uso de flujos de trabajo de Databricks. Al utilizar un servicio de orquestación unificado, totalmente integrado con la plataforma Data Intelligence de Databricks, estos líderes de fabricación no solo mejoraron su eficiencia operativa sino que todavía aceleraron la innovación para ofrecer información procesable en tiempo positivo. Ya sea optimizando las cadenas de suministro, garantizando la preparación del inventario o automatizando los flujos de trabajo a escalera, Databricks Workflows permite a las organizaciones ser más ágiles, eficientes y basadas en datos.
Preparación a los flujos de trabajo de Databricks
Databricks Workflows ofrece una posibilidad de orquestación simple y confiable para datos e inteligencia industrial en Data Intelligence Platform. Al utilizar Workflows, puede tener una orquestación de flujo de trabajo unificada para implementar canalizaciones de ETL, flujos de trabajo de capacitación de ML y más. Los flujos de trabajo todavía ofrecen capacidades mejoradas de flujo de control y admiten diferentes tipos de tareas y opciones de activación.