Athrun Data Intelligence


Durante los últimos tres meses, tuve la oportunidad de trabajar como pasante de papeleo de productos en el equipo de ingestión de Databricks. Durante este tiempo, trabajé en proyectos a gran escalera y muy técnicos que mejoraron mi comprensión de la obra de un pantano de datosAdemás adquirí una comprensión profunda de cómo las innovaciones como Conexión de LakeFlow, Cargador forzosoy COPIAR EN Extraer datos de una amplia variedad de formatos y fuentes de datos de guisa efectivo. Esta experiencia ha sido transformadora para mi crecimiento como regente de producto, ya que los principios culturales de Databricks elevaron mi capacidad para identificar las micción de los clientes, crear soluciones impactantes y entregarlas con éxito al mercado.

El equipo de ingestión de Databricks

La ingesta de datos es a menudo la puerta de entrada a la Plataforma de inteligencia de datosSe centra en incorporar datos de forma sencilla y efectivo, de forma que se unifique con otras herramientas de Databricks como Catálogo de Unity y Flujos de trabajoDe esta guisa, los datos quedan disponibles para exploración, estudios forzoso y muchas otras aplicaciones posteriores.

Definiendo el problema

Transmitido el impacto potencial de nuestro trabajo en casi todos los clientes que utilizan la plataforma Databricks, me sentí impulsado a entregar resultados de incorporación calidad. Comencé por centrarme en el principio cultural central de Databricks: la obsesión por el cliente. Tuve la oportunidad de reunirme con casi 30 clientes y asimilar de ellos, y batallar sobre sus cargas de trabajo, tareas pendientes (Jobs To Be Done, JTBD) y solicitudes de la plataforma. A través de estas discusiones basadas en hipótesis, obtuve información sobre las diversas arquitecturas que nuestros clientes configuran para ingerir miles de millones de archivos en el servidor de almacenamiento. Observé que la ingestión de datos en Databricks ayuda a respaldar casos de uso críticos, como la reproducción de una variedad de paneles de control o el avance de chatbots de IA personalizados para sus organizaciones.

Definiendo la experiencia del cliente

Un aspecto importante de mi función consistía en documentar de forma clara y concisa los conocimientos adquiridos a partir de los datos que recopilaba de los clientes. Esto incluía mejorar los recorridos de los usuarios paso a paso, consolidar los comentarios de los clientes y analizar a la competencia. Partiendo de los principios básicos, busqué oportunidades para eliminar las asperezas, disminuir la cantidad de pasos y cambios de contexto, y automatizar las configuraciones siempre que fuera posible. Dada la gran visibilidad de estos documentos entre los directivos (que en ocasiones recibían comentarios directos de nuestro director ejecutante), era fundamental contar con una documentación clara y concisa.

A lo amplio del camino, colaboré estrechamente con los ingenieros de clase mundial de mi equipo, trabajando en un sistema de «dos en una caja». Esto me permitió no solo combinar mis conocimientos de los clientes con su profunda experiencia técnica, sino asimismo mejorar mi propia comprensión de los sistemas de ingeniería de datos. Y para validar las soluciones que diseñamos, recopilamos una gran cantidad de comentarios de destacados ingenieros y gerentes de productos en equipos complementarios. Por posterior, trabajé en estrecha colaboración con diseñadores de UI/UX para traducir estos conocimientos en interfaces intuitivas.

Construyendo conexiones

Adicionalmente de este trabajo gratificante, mi pasantía estuvo llena de experiencias inolvidables que me permitieron explorar San Francisco y relacionarme con otros pasantes. Asistí a mi primer partido de béisbol de las grandes ligas viendo a los Gigantes de San Francisco, visité las fascinantes exhibiciones del Exploratorium y disfruté del crucero de investigación y avance del Campo de acción de la Bahía (donde los pasantes de PM ganamos el segundo puesto en el torneo de cornhole). Establecer relaciones con personas tan talentosas y maravillosas agregó una dimensión singular a mi pasantía universitaria final, creando expresiones duraderos que hicieron que el verano fuera aún más agradable.

Cómo optimicé la ingesta de datos a gran escala

Conclusión

Mi pasantía en Databricks ha sido desafiante y gratificante a la vez. Obtuve conocimientos técnicos profundos, perfeccioné mis habilidades de comunicación y prosperé en la colaboración interdisciplinaria. Estas experiencias han agudizado mis habilidades y han alimentado mi impulso por la papeleo de productos. Estoy entusiasmado por aplicar lo que he aprendido en futuras oportunidades y seguir creciendo en este campo dinámico.

Si quieres trabajar en proyectos de vanguardia contiguo a líderes de la industria, ¡te recomiendo insistentemente que te postules para trabajar en Databricks! Recepción el sitio Carreras en Databricks página para obtener más información sobre las vacantes de empleo en toda la empresa. O si está diligente para optimizar su proceso de ingesta de datos, explore cómo Conexión de LakeFlow Puede permitir a cada profesional implementar canales de datos a escalera.

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *