Fivetran adapta sus automatizaciones y principios ELT desarrollados para almacenes de datos a lagos de datos y casas de lago con su nuevo servicio en la nube Managed Data Lake Service.
Fivetran es una plataforma de automatización del movimiento de datos que, a través de cientos de conectores y canales predefinidos, simplifica y acelera la transferencia de datos a almacenes de datos en la nube.
Tradicionalmente, Fivetran solo admitía almacenes de datos, normalmente utilizados para almacenar datos estructurados y relacionales para impulsar aplicaciones de análisis e inteligencia empresarial (BI).
Con su nuevo servicio” Servicio de lago de datos administrado de Fivetran », Fivetran tiene como objetivo ofrecer el mismo nivel de automatización y simplificación con datos no estructurados y lagos de datos (lagos de datos, lakehouse) para análisis en tiempo real, aprendizaje automático e inteligencia artificial.
El Servicio de lago de datos administrado de Fivetran simplifica la gestión del lago de datos al convertir automáticamente los datos (de donde vengan) a formatos abiertos populares (es decir, Apache Iceberg o Delta Lake) antes de depositarlos en el lago de datos. “ Combinado con la gestión y el mantenimiento continuos de tablas de Fivetran, los clientes se benefician de la facilidad de consulta y la usabilidad de un almacén de datos en la nube, con la flexibilidad y escalabilidad de un lago de datos. » según el editor. “ La idea es llevar a la IA esta infraestructura escalable que le hemos proporcionado a la BI durante los últimos nueve años ».
Según Fivetran, este nuevo servicio no solo convierte y centraliza datos en lagos de datos, sino que también proporciona un servicio de gestión de lagos de datos de extremo a extremo que automatiza completamente las tareas de gestión de bajo nivel. “ Fivetran realiza el tedioso trabajo de administrar cambios de datos, detección de información de identificación personal (PII), deduplicación y otras tareas de mantenimiento de tablas de bajo nivel para que los desarrolladores no pierdan tiempo en un trabajo que puede automatizarse. », explica George Fraser, director ejecutivo de Fivetran. “ Esperamos hacer que los usuarios empresariales y los científicos de datos sean más productivos al proporcionar datos limpios, centralizados y optimizados desde cualquier fuente. »
El servicio Managed Data Lake aprovecha los 500 conectores existentes de Fivetran, luego normaliza y deduplica los datos antes de enviarlos a uno de los lagos de datos admitidos, en formato de tabla Delta Lake o Apache Iceberg. Una vez en el lago de datos, los usuarios pueden trabajar con el motor informático de su elección para extraer estos datos o transferirlos a una plataforma de aprendizaje automático para impulsar sus nuevas aplicaciones de IA.
El servicio Managed Data Lake actualmente es compatible con Amazon S3, Azure Data Lake Storage y Microsoft OneLake (Microsoft Fabric). La compatibilidad con Google BigLake también se anunciará dentro de unas semanas. La solución también se integra con soluciones de gobernanza de datos y catálogos existentes, como AWS Glue, Databricks Unity Catalog y Microsoft Purview.
Hasta finales de agosto, Fivetran ofrecerá este nuevo servicio de forma gratuita (hasta 10.000 dólares por cliente). Posteriormente, Fivetran aplicará su modelo de consumo actual para facturarlo. El editor especifica que una de las ventajas de utilizar el servicio Fivetran Managed Data Lake es que la ingesta es gratuita, a diferencia de otras soluciones equivalentes.
Lea también:
Dell y Starburst se asocian para lanzar una nueva oferta híbrida y abierta de Data Lakehouse
Vast Data y Dremio unen fuerzas para facilitar el análisis de océanos de datos
Cree nuevas oportunidades a partir de datos, de forma segura
Obtenga eficiencia y reduzca costos con análisis de datos de próxima generación
Google Cloud lanza BigLake y unifica sus plataformas de datos
[
