Actian y Databricks: Tendiendo puentes entre la ingeniería de datos y el valor empresarial

Databricks ha redefinido las posibilidades de la ingeniería de datos y la analítica, ofreciendo canalizaciones de datos potentes y a gran escala, transformaciones complejas y formación de modelos de aprendizaje automático. Sin embargo, incluso los entornos de datos más sofisticados suelen enfrentarse a un problema conocido: la excelencia técnica en ingeniería de datos no se traduce automáticamente en valor empresarial.

Esa brecha existe porque las personas que más necesitan los datos, como analistas, responsables financieros y usuarios empresariales, a menudo no pueden encontrarlos, acceder a ellos o comprenderlos con confianza. La razón no es la falta de activos de datos. Es la falta de contexto, capacidad de descubrimiento y accesibilidad de autoservicio.

Aquí es donde el catálogo de datos moderno se vuelve no sólo útil, sino esencial. Y es donde la Plataforma de Inteligencia de Datos Actian es un complemento crítico del Catálogo Unity de Databrickstendiendo un puente entre la ingeniería de datos y el valor empresarial.

Acelerar la adopción en toda la empresa

Databricks Unity Catalog proporciona una gobernanza sólida y permisos detallados dentro del entorno Databricks. Está diseñado para ingenieros, ofreciendo linaje, reforzando la seguridad y estandarizando el acceso.

Aunque estas capacidades son necesarias para las empresas modernas, la gobernanza técnica no es suficiente. Las organizaciones también necesitan la detección de datos y el acceso autoservicio a los mismos, que ofrezcan a los usuarios y dominios de datos una forma de hacer comprensibles y utilizables los datos fiables.

Consideremos este reto típico: Un analista de marketing necesita datos de segmentación de clientes para planificar una campaña. Por su parte, un gestor de productos quiere conocer las tendencias de adopción de funciones, mientras que el equipo financiero necesita datos de ingresos desglosados por unidad de negocio.

Todos saben que los datos existen en algún lugar de la organización, pero ellos:

• No sé dónde encontrarlo.
• No puedo descifrar los nombres de las tablas técnicas ni los metadatos.
• No están seguros de si los datos están aprobados para su caso de uso.
• Hay que enviar solicitudes para que TI obtenga los datos y esperar a que se acceda a ellos.
• Falta de visibilidad para ver cómo se relacionan los datos entre varios sistemas.

Esta barrera de "última milla" mantiene los datos valiosos alejados de los analistas y, en última instancia, de los responsables de la toma de decisiones. Con demasiada frecuencia, los empleados no pueden encontrar la información que necesitan, incluso en organizaciones que utilizan plataformas de datos avanzadas.

4 razones por las que los catálogos de datos siguen siendo esenciales en las pilas de datos modernas

Un catálogo de datos moderno y completo, como Actian Data Intelligence Platform, llena el vacío de accesibilidad que las plataformas de ingeniería de datos por sí solas no pueden cerrar. Complementa Databricks Unity Catalog de cuatro maneras clave:

1. Añade contexto empresarial a los metadatos técnicos

Databricks Unity Catalog rastrea metadatos técnicos como esquemas de tablas, tipos de columnas y ubicaciones de almacenamiento. Sin embargo, los usuarios empresariales no piensan en términos de customer_dim_v3 o fact_transactions_daily. Piensan en "datos demográficos de clientes" y "ventas diarias".

Actian Data Intelligence Platform enriquece los metadatos técnicos de Unity Catalog con definiciones, contextos y relaciones favorables para el negocio. Una tabla llamada cust_seg_ml_scores se convierte en "Customer Segmentation ML Scores - Propensity scores for marketing segments, updated daily, approved for marketing use". Esta traducción ayuda a los usuarios a comprender no sólo qué son los datos, sino cómo y por qué utilizarlos.

2. Admite la detección multiplataforma

Aunque Databricks destaca dentro de su ecosistema, las empresas rara vez operan en una única plataforma. A menudo tienen datos en bases de datos heredadas, aplicaciones SaaS, sistemas locales y plataformas en la nube. Esto puede suponer un reto para los usuarios empresariales y los analistas que necesitan descubrir datos, independientemente de dónde residan físicamente.

Actian Data Intelligence Platform proporciona una capa de descubrimiento unificada, conectando Databricks Unity Catalog con el resto del panorama de datos de la organización. Los usuarios pueden buscar una vez y encontrar datos relevantes en todos los sistemas, con políticas de gobierno coherentes, sin cambiar de herramienta.

Los resultados de la búsqueda unifican los metadatos, el linaje de los datos y el contexto empresarial en una sola interfaz. Esto permite a los usuarios encontrar activos de datos relevantes independientemente de su ubicación.

3. Ofrece autoservicio con gobernanza incorporada

La promesa de las plataformas de datos modernas es la analítica de autoservicio. El verdadero autoservicio no significa acceso incontrolado. Significa un empoderamiento controlado equilibrando la accesibilidad a los datos con la gobernanza, la seguridad y el cumplimiento.

Aquí es donde brilla el enfoque de Actian para el gobierno de datos. La plataforma ofrece:

• Automatizado flujos de acceso que conceden permisos en función del contexto empresarial y las funciones de los usuarios.
• Contratos de datos que definen cómo pueden consumirse los productos de datos.
• Seguimiento completo del linaje que muestra a los usuarios empresariales de dónde proceden los datos y cómo se transforman.
• Barandillas de gobernanza que impidan el uso inadecuado al tiempo que permitan la exploración.

Los usuarios empresariales obtienen la experiencia de autoservicio que necesitan, mientras que los equipos de datos mantienen la gobernanza que requieren.

4. Permite la comprensión semántica para el descubrimiento natural

Las capacidades de búsqueda tradicionales se basan en palabras clave que coinciden con los metadatos. Esto funciona bien para encontrar coincidencias exactas, pero no tiene en cuenta el contexto. Por ejemplo, alguien que busque "ingresos" no verá datos etiquetados como "ingresos". La base del grafo de conocimiento de la plataforma permite una búsqueda semántica que comprende las relaciones y el contexto.

Con Actian, cuando un usuario empresarial busca "valor del ciclo de vida del cliente", la plataforma ofrece automáticamente resultados de conceptos relacionados como "CLV", "ingresos del ciclo de vida", "puntuación del valor del cliente" y "métricas de retención", incluso si esos términos exactos no aparecen en la consulta de búsqueda. Esta inteligencia sensible al contexto mejora notablemente la usabilidad de los datos, especialmente para las funciones no técnicas.

Impacto en el mundo real: Sanoma Media Finlandia

Sanoma Media Finlandia es un ejemplo perfecto de por qué los catálogos de datos siguen siendo esenciales incluso con la mejor ingeniería de datos. Como explica Mikko Eskola, director de datos de la empresa: "Como empresa finlandesa líder en medios de comunicación, es importante que ofrezcamos contenidos relevantes a nuestra audiencia y perspectivas fiables a nuestros anunciantes."

Para alcanzar estos objetivos, Sanoma necesitaba algo más que capacidades de ingeniería de datos. Necesitaba un descubrimiento de datos organizativo que ayudara a la empresa a seguir siendo competitiva y a innovar. El reto no consistía en crear canalizaciones de datos, ya que Databricks se encarga de ello a la perfección. El reto consistía en hacer los datos accesibles a los usuarios empresariales.

Al implantar Actian Data Intelligence Platform junto con Databricks, Sanoma creó una solución completa:

• Para los ingenieros de datosDatabricks proporciona la potencia necesaria para ingerir, transformar y procesar volúmenes masivos de datos de medios de comunicación, comportamiento de usuarios y métricas publicitarias.
• Para los usuarios empresarialesEl catálogo de datos de Actian hace que los datos sean detectables, comprensibles y accesibles a través de interfaces intuitivas y flujos de trabajo de autoservicio.

¿Cuál es el resultado? Sanoma espera reducir significativamente los cuellos de botella en la gestión del acceso a los datos, manteniendo al mismo tiempo la gobernanza y la seguridad. Los equipos de marketing pueden encontrar los datos de audiencia más rápidamente. Los equipos de ventas pueden acceder a la información de los anunciantes sin tener que esperar a TI. Los equipos de producto pueden explorar los patrones de comportamiento de los usuarios con la confianza de que están utilizando datos aprobados y de alta calidad.

Actian y Databricks ofrecen una base de datos unificada

Piense en Databricks como el motor del entorno de datos que ingiere, transforma y modela datos a escala. Actian añade la capa de inteligencia que conecta esa potencia con las personas que utilizan los datos.

Juntos, crean un ecosistema completo de inteligencia de datos en el que todas las partes interesadas, desde el ingeniero de datos hasta el analista, pueden confiar, comprender y actuar sobre los datos con confianza.

La ventaja de la IA: Preparar los datos gestionados para la IA

La importancia de los catálogos de datos se hace aún más evidente a medida que las organizaciones adoptan la IA y despliegan agentes de IA. El Servidor de Protocolo de Contexto de Modelos (MCP) de Actian ofrece valor aquí al conectar asistentes de IA como ChatGPT y Claude directamente a datos gobernados y catalogados, garantizando que las respuestas de IA sean precisas, explicables y conformes.

Esto es transformador porque los agentes de IA necesitan algo más que acceso a datos brutos. Necesitan contexto, relaciones y significado empresarial para proporcionar información precisa. Sin esta capa de inteligencia, los modelos de IA corren el riesgo de producir perspectivas poco fiables a partir de datos no verificados. Con ella, las organizaciones pueden escalar con seguridad la adopción de la IA y acelerar el valor de sus inversiones en datos.

Según Capgemini el 93% de los líderes creen que escalar con éxito los agentes de IA proporciona una ventaja competitiva sobre sus homólogos del sector. Sin embargo, esa ventaja solo se materializa cuando los agentes de IA trabajan con datos catalogados, gobernados y preparados para la IA.

Lo esencial: Los catálogos de datos no son heredados. Son esenciales.

Algunas organizaciones creen erróneamente que las plataformas de datos modernas como Databricks eliminan la necesidad de catálogos de datos. Lo cierto es lo contrario. Cuanto más sofisticada se vuelve la ingeniería de datos de una organización, más esencial resulta un catálogo de datos completo.

A medida que los ecosistemas de datos se expanden y la IA se vuelve omnipresente, la necesidad de transparencia, confianza y accesibilidad no hace más que crecer. He aquí por qué:

• Sin un catálogoincluso la mejor ingeniería de datos crea una fortaleza técnica en la que sólo pueden navegar los ingenieros. Los usuarios siguen dependiendo del departamento de TI para cualquier cuestión relacionada con los datos.
• Con un catálogola excelencia en ingeniería de datos crea valor empresarial. La inversión en Databricks es rentable para toda la organización, no sólo para el equipo de datos, ya que facilita el acceso a los datos.

Para las organizaciones empresariales que se toman en serio el control de los datos, la cuestión no es si invertir o no en un catálogo de datos. La pregunta es "¿Cómo puede permitirse no hacerlo?".

Al integrar Actian Data Intelligence Platform con Databricks Unity Catalog, las empresas consiguen una verdadera democratización de los datos con datos gobernados, contextuales y preparados para la IA. Las organizaciones se benefician de una solución integral que sirve a toda la organización, desde los ingenieros de datos que crean canalizaciones hasta los analistas empresariales que toman decisiones críticas.

No se trata sólo de una mejor pila de datos. Es una ventaja competitiva basada en la confianza, la visibilidad y la colaboración. Obtenga más información sobre cómo Actian y Databricks amplían la visibilidad y el gobierno de los datos.

Sobre Danielle Simon

Danielle Simon, directora sénior de Alianzas Estratégicas de Actian, aporta más de 15 años de experiencia en asociaciones globales, alianzas y gestión de canales en las áreas de datos, nube, gobernanza de IA, análisis y seguridad. Su experiencia incluye la aceleración del crecimiento de los ingresos para empresas innovadoras a través de ventas y asociaciones estratégicas.