Carácter de IA/BI es una experiencia conversacional para que los equipos de negocios puedan obtener información valiosa de sus datos a través del idioma natural. Genie aprovecha la IA generativa adaptada a los datos, los patrones de uso y los conceptos comerciales de una estructura y aprende continuamente de los comentarios de los usuarios. Esto permite a los usuarios no técnicos hacer preguntas como lo harían con un compañero de trabajo experimentado, recibiendo respuestas relevantes y precisas directamente de sus datos empresariales.
Con la creciente admisión de espacios Genie, es esencial que Los usuarios tienen confianza en la precisión de la información proporcionada.. Esta aval es crucial para permitirles tomar las decisiones más informadas basadas en los conocimientos que ofrece Genie.
Los profesionales de datos responsables de crear y perseverar espacios Genie para sus equipos comerciales suelen citar dos requisitos críticos:
- La capacidad de certificar que las instrucciones y ejemplos que mantienen internamente del espacio Genie mejoren efectivamente la precisión común.
- Cuando se solicite, tener la capacidad de demostrar que las respuestas generadas por Genie sean correctas y comunicar esos comentarios al agraciado final.
Para enfrentarse estos requisitos, nos complace presentar dos nuevas características en AI/BI Genie para ayudar a producir confianza en la precisión de las respuestas devueltas:
- Puntos de relato – Los autores de Genie ahora pueden crear preguntas de prueba para realizar un seguimiento de la precisión común a medida que actualizan las instrucciones y configuraciones de su espacio Genie.
- Solicitar revisión – Los usuarios finales ahora pueden solicitar a los autores de Genie que verifiquen o corrijan las respuestas y luego aceptar confirmación.
Puntos de relato
Los puntos de relato permiten a los autores de Genie evaluar sistemáticamente la precisión de sus espacios Genie. Un conjunto de preguntas de relato admisiblemente detallado debe incluir las preguntas más frecuentes de los usuarios, inmediato con 2 o 3 variaciones de redacción. Luego, los autores pueden ejecutar estos puntos de relato a lo generoso del tiempo para determinar si las ediciones en el espacio mejoran efectivamente la precisión común.
Cómo utilizar los puntos de relato
Para evaluar mejor la precisión de su espacio Genie con Benchmarks, siga estos pasos:
- Preparar: Asegúrese de que su espacio Genie incluya tablas y metadatos limpios. Comience probando manualmente algunas preguntas comunes de los usuarios y agregando instrucciones para aumentar la precisión original.
- Amplificar puntos de relato: Los puntos de relato que agregue deben reflectar las diferentes frases y versiones de las preguntas comunes que hacen sus usuarios. Por ejemplo, si sus usuarios suelen solicitar Los 10 principales clientes por ventas totales este año, Sería útil comparar algunas versiones como «Los 10 principales clientes por ingresos en el año fiscal 2024» y «Muéstrame los 10 clientes principales de este año por ingresos». Luego agrega una información SQL que rebate con precisión a su pregunta de relato. Esto ayuda a la función de evaluación a comparar la respuesta de Genie con una fuente de verdad para cada pregunta.
- Ejecutar puntos de relato + evaluar: Una vez que haya creado un conjunto de puntos de relato representativos, haga clic en «Ejecutar puntos de relato» para evaluar automáticamente Genie en todas las preguntas de puntos de relato. Cada pregunta recibirá una epíteto de evaluación: Correcta o Necesita revisión. Las preguntas se marcan como Correctas si el resultado de la consulta de Genie coincide exactamente con el resultado de la consulta del punto de relato.
≈ - Mejorar: Haga doble clic en preguntas específicas para comprender dónde necesita mejorar Genie. Luego de identificar las preguntas específicas con las que tiene problemas su espacio Genie, realice mejoras en su espacio Genie. Por ejemplo, es posible que descubra que necesita unir instrucciones para enseñarle a Genie cómo calcular el «mejor representante de ventas de Asia». Luego, vaya a la página de instrucciones y agregue una consulta SQL de ejemplo que muestra a Genie cómo replicar esta pregunta correctamente.
- Retornar a ejecutar los puntos de relato: Luego de mejorar las Instrucciones de mi espacio, volvería a ejecutar mi conjunto de Puntos de relato para ver si mi precisión común ha aumentado. Luego puede realizar un seguimiento de la precisión de su espacio Genie a lo generoso del tiempo en la pestaña Evaluaciones. Continúe agregando más preguntas de relato a medida que vea preguntas comunes que hacen sus usuarios finales.
Solicitar revisión
Genie es una poderosa aparejo para el examen exploratorio de datos, que permite a los usuarios no técnicos hacer preguntas de seguimiento y obtener nuevos conocimientos de sus datos sin involucrar a profesionales expertos. Sin bloqueo, al igual que el examen en otras herramientas como Excel, es posible que desee una segunda opinión antaño de presentar sus hallazgos como objetivos.
La función Solicitar revisión permite a los usuarios finales completar este ciclo de revisión directamente en Genie; no hay privación de capturas de pantalla ni intercambios en Slack o Teams.
Cómo utilizar Solicitar revisión
- Haga clic en el cogollo Solicitar: cuando un agraciado recibe una respuesta que desea demostrar, puede hacer clic en el ícono de solicitud para iniciar una revisión. Se recomienda que luego agreguen un comentario explicando su solicitud al administrador del espacio Genie.
- Revisión del administrador: Luego de remitir una solicitud, los administradores del espacio Genie pueden revisarla en la página Historial, verificando el mensaje llamativo, el SQL generado y cualquier comentario adjunto. Pueden marcar el SQL como correcto o modificarlo para el agraciado empresarial.
- Solicitante notificado: Luego de que el administrador verifique o corrija el SQL generado, se notificará a los usuarios finales sobre esta comprobación. Luego podrán revisar esto en la pinta de la página Historial.
Conclusión
Con la presentación de puntos de relato y revisión de solicitudes, AI/BI Genie restablecimiento significativamente la confianza del agraciado en la precisión y confiabilidad de las respuestas que recibe. Los puntos de relato permiten un seguimiento sistemático de las mejoras de precisión a lo generoso del tiempo, lo que garantiza que las ediciones de las instrucciones sean efectivas. Request Review proporciona una modo perfecta para que los usuarios verifiquen las respuestas críticas, fomentando la confianza en los conocimientos que genera Genie. En conjunto, estas nuevas funciones permiten a los equipos empresariales usar Genie con confianza para tomar las decisiones críticas necesarias en su trabajo diario.
Los animamos a todos a asomar a crear espacios Genie si aún no lo han hecho. Asegúrate de repasar nuestro Documentación de AI/BI Genie. Para ver los paneles de AI/BI y Genie en actividad, consulte nuestro manifestación y toma el represión por el producto.
El equipo de Databricks siempre averiguación mejorar la experiencia AI/BI Genie y le encantaría escuchar sus comentarios.