Dimensionando com Airflow 3.2: Quando Postergar e Quando Usar Operadores Assíncronos Nativos

O Apache Airflow 3.2 adiciona suporte assíncrono nativo ao PythonOperator, permitindo que cargas de trabalho de I/O de alto throughput sejam executadas de forma concorrente dentro de um único worker, eliminando a sobrecarga do triggerer. Quando combinada com a Iteração Dinâmica de Tarefas (Dynamic Task Iteration), essa abordagem melhora drasticamente o desempenho para tarefas de micro-batch, como chamadas de API ou transferências SFTP, oferecendo escalabilidade aprimorada.