Blog | Data Strategy & Insights | November 26, 2018 | 2 min read

¿Qué novedades incorpora la versión 6.6.1 de Actian DataFlow?

By Actian Corporation

#Analítica #Big Data #Flujo de datos #ETL #Análisis de Hadoop
Logotipo de Actian

By Actian Corporation

#Analítica #Big Data #Flujo de datos #ETL #Análisis de Hadoop
In this post:

Actian DataFlow es una plataforma de flujos de trabajo paralelos para el acceso, la transformación, la preparación y el análisis predictivo de datos de extremo a extremo que elimina los cuellos de botella de rendimiento en sus aplicaciones con un uso intensivo de datos. Como complemento del motor analítico de Actian, DataFlow aprovecha la concurrencia, el paralelismo y el procesamiento en serie para acelerar el movimiento de datos entre las distintas ubicaciones de su arquitectura de datos, lo que permite obtener resultados más rápidos. DataFlow elimina las limitaciones de memoria, así como la necesidad de trasladar los datos a almacenes específicos antes de ejecutar los análisis. DataFlow evalúa los recursos disponibles antes de dividir la ejecución en fragmentos más pequeños que se pueden ejecutar en paralelo para aprovechar al máximo el escalado horizontal y vertical.

DataFlow combina el entorno de flujo de trabajo visual de arrastrar y soltar KNIME (plataforma de exploration de données código abierto) con la plataforma subyacente Actian DataFlow para proporcionar un mayor control sobre todo el proceso de lectura de los datos, la realización de las funciones de transformación y análisis, y la escritura de los resultados.

Novedades de la versión 6.6.1

Esta actualización de DataFlow certifica las nuevas versiones de las distribuciones Hadoop más populares de Apache, Cloudera, Hortonworks y MapR, además de mejorar las funciones de carga paralela con las versiones más recientes de Vector para Linux, Windows y Hadoop. También hay soporte para cinco nuevos tipos de datos con DataFlow para manejar una mayor variedad de formatos de datos. He aquí la lista específica:

  • Se ha añadido compatibilidad con Apache Hadoop 3.0.1+.
  • Se ha añadido compatibilidad con MapR 6.0.1.
  • Soporte verificado para MapR 5.2.2.
  • Se ha actualizado la compatibilidad con Hortonworks HDP 2.6.
  • Soporte actualizado para Cloudera CDH 5.15.
  • Se ha actualizado el cargador directo de Vector para que funcione con las últimas versiones de Vector y VectorH (5.0 y 5.1).*
  • Añadido soporte para 5 nuevos tipos de base: Money, ip4, ip6, uuid, e Intervalos (Periodos y Duraciones).
  • Añadido soporte para la última librería de autenticación de AWS (1.11 previamente 1.3).
  • Añadido soporte para rutas lógicas en Hadoop.

*Actian Vector pasó a llamarse Actian Analytics Engine en 2026.

Resultados de DataFlow:

For data preparation, data onboarding, and ETL use cases, DataFlow can accelerate the process by factors of 20X or more. For one customer who previously required 17 hours to prepare and cleanse data to onboard new customers, DataFlow reduced the time to 43 minutes, almost 24 times faster. Another customer used DataFlow to parallelize and pipeline their data transfer process to reduce their claims processing times from more than 30 hours to just 20 minutes, which is 90 times faster. In a third example DataFlow demonstrated that it could load 500,000 records into an Oracle database in seven seconds, versus a previous runtime of more than 3 minutes. Contact [email protected] if you are interested in seeing a demonstration.