Confluent presenta Tableflow para optimizar el Data Streaming

Confluent ha dado un paso significativo hacia la integración de análisis y operaciones con el lanzamiento de Tableflow. Esta nueva función, anunciada el 19 de marzo de 2024, ofrece a los clientes de Confluent Cloud una manera más eficiente y segura de gestionar el flujo de datos, convirtiendo la data streaming en tablas Apache Iceberg.

Confluent Tableflow

La necesidad de una conexión fluida entre los datos operativos y analíticos ha sido una prioridad para muchas empresas modernas. Tradicionalmente, estos conjuntos de datos han permanecido aislados, dificultando la toma de decisiones informadas en tiempo real. Con Tableflow, Confluent busca abordar este desafío al proporcionar una solución que facilita la conversión de data streaming en tablas Iceberg, un estándar abierto para la gestión de datos en tablas en entornos analíticos.

Shaun Clowes, Director de Producto de Confluent, destaca la importancia de esta integración: “El problema crítico para las empresas modernas es que los estados operativos y analíticos deben estar altamente conectados, pero a menudo se basan en conexiones point-to-point a través de docenas de herramientas”. Tableflow se presenta como una solución para este problema, permitiendo que los datos operativos y analíticos estén más estrechamente vinculados, facilitando así la obtención de información en tiempo real.

Ventajas clave de Tableflow

Una de las ventajas clave de Tableflow es su capacidad para convertir tópicos de Apache Kafka y sus esquemas asociados en tablas de Apache Iceberg con un solo clic. Esto simplifica enormemente el proceso de carga de almacenes y lagos de datos para su análisis, tanto en procesamiento por lotes como en tiempo real. Además, la función garantiza que las tablas Iceberg se mantengan continuamente actualizadas con el flujo de datos más reciente, lo que permite a las empresas contar con información precisa y oportuna.

Otra mejora notable es la implementación de Stream Governance, que ahora viene activada por defecto en todas las regiones de Confluent Cloud. Esta característica clave facilita el acceso a funciones esenciales de gobernanza de datos, como Schema Registry, Data Portal y Stream Lineage en tiempo real. Esto ayudará a los equipos a aplicar estándares de datos universales y a garantizar la calidad y coherencia de los datos, minimizando así los errores y los costos asociados.

Además de Tableflow y Stream Governance, Confluent también ha introducido mejoras significativas en sus conectores totalmente gestionados, así como en los clusters enterprise. Estas actualizaciones se centran en mejorar la seguridad, usabilidad y precios, permitiendo a los clientes conectarse de forma segura a sistemas de datos críticos y optimizar los recursos para lograr un mayor ahorro de costos.