Mejora tu catálogo de datos con un mercado de datos empresarial (EDM)

Durante la última década, los catálogos de datos se han convertido en pilares fundamentales en el panorama de las iniciativas basadas en datos. Sin embargo, muchos proveedores del mercado no cumplen con las expectativas debido a plazos excesivamente largos, proyectos complejos y costosos, modelos burocráticos de gobernanza de datos, bajas tasas de adopción por parte de los usuarios y una escasa creación de valor. Esta discrepancia va más allá de los proyectos de gestión de metadatos y refleja un fracaso más amplio a nivel de gestión de datos.

La situación actual pone de manifiesto una desconexión entre la competencia técnica y los conocimientos empresariales, una falta de colaboración entre los productores y los consumidores de datos, problemas persistentes de latencia y calidad de los datos, y una escalabilidad insuficiente de las fuentes de datos y los casos de uso. A pesar de las importantes inversiones realizadas tanto en personal como en tecnología, las empresas se enfrentan a una cruda realidad: la incapacidad de dar respuesta adecuada a las necesidades empresariales.

Sin embargo, la buena noticia es que esta situación se puede revertir adoptando un mercado de datos empresarial (EDM) y aprovechando las inversiones ya realizadas.

Presentamos el Enterprise Data Marketplace

El EDM no es una panacea, sino más bien una solución transformadora. Obliga a las empresas a replantearse su enfoque respecto a los datos, introduciendo un nuevo concepto: los productos de datos. Resulta imprescindible contar con una «Data Mesh» sólida, tal y como defiende Zhamak Dehghani en su perspicaz entrada de blog, en la que el EDM actúa como la capa experiencial de la «Data Mesh».

Sin embargo, el panorama ha evolucionado con una nueva generación de EDM: una plataforma de intercambio de datos integrada con un sólido catálogo de datos federado:

EDM = Plataforma de intercambio de datos + Catálogo de datos sólido

Esto es precisamente lo que consigue la plataforma Actian Data Intelligence, y lo que pretende mejorar aún más, según nuestra definición de EDM:

Un mercado de datos empresarial es una solución similar al comercio electrónico, en la que los productores de datos publican sus productos de datos y los consumidores de datos exploran, analizan y adquieren dichos productos de datos publicados.

El Marketplace funciona sobre la base de un catálogo de datos, lo que facilita el uso compartido y el intercambio de los datos de dominio más valiosos, agrupados en forma de productos de datos.

¿Por qué complementar tu catálogo de datos con un mercado de datos empresarial?

Hemos recopilado cinco razones de peso para mejorar tu catálogo de datos con un mercado de datos empresarial.

Razón n.º 1: Optimizar el proceso de creación de valor

Al confiar a los distintos ámbitos la responsabilidad de crear productos de datos, se aprovecha el amplio bagaje de conocimientos que poseen los profesionales de la empresa y se fomenta una colaboración más fluida con los ingenieros de datos, los científicos de datos y los equipos de infraestructura. En consonancia con los objetivos empresariales comunes, el diseño, la creación y el mantenimiento de productos de datos valiosos y listos para usar adoptarán colectivamente una mentalidad basada en el «Product Design Thinking».

En este marco, los equipos se organizan de forma autónoma, optimizando las ceremonias para la entrega incremental de productos de datos, lo que aporta fluidez al proceso de creación. A medida que los productos de datos incorporan nuevos metadatos para orientar a los consumidores de datos sobre su uso, un EDM asume un papel fundamental a la hora de dar forma y explorar los metadatos relacionados con los productos de datos, actuando esencialmente como el «plano de experiencia» dentro del marco de Data Mesh.

Al tener en cuenta los matices específicos de cada ámbito, se produce una notable reducción tanto del volumen como del tipo de metadatos, además de un proceso de curación más eficiente. En estos casos, un sistema de gestión de datos empresarial (EDM) robusto, respaldado por un potente catálogo de datos como la Actian Data Intelligence Platform, se erige como el motor central. Este EDM no solo facilita el diseño de ontologías específicas de cada ámbito, sino que también cuenta con capacidades de recopilación automatizada tanto de fuentes de datos locales como en la nube. Además, permite la federación de catálogos de datos para implementar diversas topologías de «Data Mesh» y ofrece a los usuarios finales una experiencia de «Data Shopping» intuitiva y sin esfuerzo, similar a la del comercio electrónico.

Razón n.º 2: Racionalizar las inversiones existentes

Mediante el uso de un EDM (junto con un potente catálogo de datos), se pueden potenciar significativamente las inversiones existentes en plataformas de datos modernas y en personal. La eliminación de los complicados flujos de datos —en los que, a menudo, no es necesario mover los datos— se traduce en un ahorro sustancial de costes. Del mismo modo, la reducción de las numerosas y complejas reuniones de sincronización con equipos multifuncionales que resultan innecesarias supone un ahorro de tiempo considerable.

Por lo tanto, el órgano de gobernanza federado mantiene un enfoque específico, centrándose exclusivamente en las actividades relacionadas con Data Mesh. Esta estrategia específica optimiza la asignación de recursos y acelera la creación de productos de datos incrementales y delegados, lo que reduce el tiempo de generación de valor.

Para garantizar unos resultados cuantificables, resulta fundamental realizar un seguimiento exhaustivo del rendimiento de los productos de datos mediante indicadores clave de rendimiento (KPI) precisos; esta medida proactiva mejora la toma de decisiones y contribuye a la obtención de resultados tangibles.

Razón n.º 3: Lograr una mayor aceptación que con un catálogo de datos únicamente

Un EDM, junto con un potente catálogo de datos, desempeña un papel fundamental a la hora de facilitar la adopción. A nivel de dominio, ayuda a diseñar y gestionar metadatos específicos del dominio que resulten fácilmente comprensibles para los usuarios de negocio de dicho dominio. Esto evita la necesidad de una «capa común», un escollo habitual en la adopción de catálogos de datos. A nivel de malla, ofrece medios para utilizar los productos de datos de forma eficaz, proporcionando información sobre la ubicación, la versión, la calidad, el estado, la procedencia, la plataforma, el esquema, etc. Un metamodelo dinámico específico del dominio, junto con potentes capacidades de búsqueda y descubrimiento, convierte al EDM en un elemento revolucionario.

El valor añadido del EDM reside en la asignación de recursos y los derechos de acceso, la integración con sistemas de gestión de entradas, las plataformas específicas para la aplicación de políticas de datos y las funcionalidades que ofrecen los proveedores de plataformas de datos modernas —un concepto denominado «gobernanza computacional de los datos»—.

Razón n.º 4: Aclarar las responsabilidades y supervisar el rendimiento en la creación de valor

La aplicación de los principios de gestión de productos a los productos de datos y la asignación de la responsabilidad a cada ámbito aportan claridad a las responsabilidades. Cada ámbito asume la responsabilidad del diseño, la producción y la gestión del ciclo de vida de sus productos de datos. Este enfoque específico garantiza que las funciones y las expectativas estén bien definidas.

A continuación, el EDM pone los productos de datos a disposición de toda la organización, estableciendo las normas que deben cumplir las distintas áreas. Esta difusión contribuye a mantener la coherencia y garantiza que los productos de datos se ajusten a los objetivos de la organización y a los criterios de calidad establecidos.

En el marco del EDM, las empresas establecen indicadores clave de rendimiento (KPI) concretos para supervisar el rendimiento empresarial de los productos de datos. Este enfoque proactivo permite a las organizaciones evaluar la eficacia de sus estrategias de datos. Además, permite a los consumidores de datos contribuir al proceso de evaluación mediante valoraciones colectivas, lo que fomenta un entorno colaborativo e inclusivo para la retroalimentación y la mejora.

Razón n.º 5: Aplicar principios contrastados de desarrollo de software «Lean» a la estrategia de datos

La creación de productos de datos sigue un paradigma similar a los principios del desarrollo de software «Lean» que revolucionaron la transformación digital. Adoptar principios como la eliminación del desperdicio, la potenciación del aprendizaje, la toma de decisiones en el último momento, la entrega rápida y la creación de calidad es parte integral del enfoque que permite una «Data Mesh».

En este contexto, el EDM actúa como una plataforma colaborativa para los equipos que se dedican a la creación de productos de datos. Facilita:

• Funcionalidades de descubrimiento: Ofrece una gestión técnica automática de los tipos de datos, la información de linaje y los esquemas, lo que permite la creación rápida de productos ad hoc.
• Gestión de metadatos específica para Data Mesh: El EDM incorpora capacidades de gestión automática de metadatos diseñadas específicamente para Data Mesh, siempre que el catálogo de datos cuente con capacidades de federación.
• Cobertura integral de la información sobre productos de datos: Garantizar una cobertura exhaustiva de la información relacionada con los productos de datos, que abarque tanto su diseño como su distribución.

En esencia, la colaboración entre un mercado de datos empresarial y un potente catálogo de datos no solo mejora el ecosistema global de datos, sino que también aporta beneficios tangibles al optimizar las inversiones, reducir las complejidades innecesarias y mejorar la eficiencia del proceso de creación de valor a partir de los datos.

Acerca del autor

Acerca de Actian Corporation

Actian permite a las empresas gestionar y controlar los datos a gran escala con total confianza. Las organizaciones confían en las soluciones de gestión e inteligencia de datos de Actian para optimizar entornos de datos complejos y acelerar la entrega de datos preparados para la IA. Diseñadas para ofrecer flexibilidad, las soluciones de Actian se integran a la perfección y funcionan de forma fiable tanto en entornos locales como en la nube y en entornos híbridos. Obtén más Acerca de Actian, la división Acerca de Actian datos e IA de HCL Software, en actian.com.