A nova versão do Apache Airflow, uma biblioteca de software de código aberto, foi lançada.
O Apache Airflow 2.9 traz avanços significativos na orquestração de dados, um recurso cada vez mais crucial à medida que o uso de Inteligência Artificial (IA) cresce.
O Apache Airflow foi criado pela Airbnb para organizar e gerenciar o fluxo de informações em pipelines de dados. Ele se integra com as principais plataformas de dados e sistemas de provedores de nuvem, incluindo Snowflake, Databricks, AWS, Microsoft e Google Cloud.
A versão 2.9 do Apache Airflow expande o uso de Directed Acyclic Graphs (DAGs) para organizar e executar tarefas em dados. Além disso, traz melhorias para o processamento paralelo dinâmico e visibilidade do status das tarefas.
Com o aumento do uso da tecnologia de código aberto, especialmente para habilitar dados para casos de uso de IA, o Apache Airflow 2.9 é uma atualização importante. Segundo o recente relatório State of Airflow de 2024, há agora aproximadamente 30 milhões de downloads da tecnologia de código aberto todos os meses1.
Para mais detalhes sobre o Apache Airflow 2.9 e seus avanços na orquestração de dados, confira as notas de lançamento no site oficial. É recomendado que todos os usuários atualizem para esta versão o mais rápido possível.
Até a próxima !!
Nenhum comentário:
Postar um comentário