Escrevendo Provedores de Tabelas Personalizados no Apache DataFusion

Os provedores de tabelas do DataFusion permitem que fontes personalizadas exponham dados de arquivos, APIs ou sistemas proprietários ao separar o planejamento da execução. TableProvider::scan() é executado durante o planejamento e deve ser leve, enquanto ExecutionPlan::execute() cria fluxos por partição e SendableRecordBatchStream realiza o trabalho real dos dados. Declarar corretamente particionamento, ordenação e filter pushdown pode eliminar RepartitionExec, SortExec e I/O desperdiçado.