Cloudfloe e DuckDB: Desvendando o Desempenho de Query Engines em Ambientes Serverless
Aprofundamento CEVIU
Aprofundamento
A notícia destaca um experimento com o Cloudfloe, que usualmente roda queries Iceberg no S3 usando DuckDB em contêineres. O teste agora é com DuckDB compilado para WebAssembly (WASM) dentro de células serverless do celld, uma implementação self-hosted do Cloudflare Workers e Durable Objects. O foco está em entender a viabilidade de usar esse modelo para motores de query, especialmente em relação ao tempo de inicialização (cold start) e à retenção de memória. O DuckDB WASM conseguiu ler uma tabela Iceberg de 37.537 linhas em 148 ms, uma performance ágil. No entanto, o custo principal não está na execução da query em si, mas no tempo que a célula leva para
Linha do tempo
CEVIU explora os Limites Práticos do DuckDB em Hardware de Consumo, detalhando sua eficiência em análises colunares.
Notícia sobre a redução de cold start em LLMs da NetEase Games, exemplificando a importância de otimizar inicializações em ambientes serverless.
Testes de Cloudflare R2 e Iceberg como arquitetura Lakehouse em potencial são abordados pelo CEVIU.
CEVIU informa que o DuckDB otimiza leitura de dados no S3 com I/O Assíncrono.
DuckLake aprimora Apache DataFusion com gerenciamento de metadados transacionais, reforçando a importância do suporte a Iceberg.
CEVIU publica que o DuckDB no ECS Fargate supera Apache Spark em processamento de JSON no S3, destacando sua performance em ambientes serverless.
Cloudfloe e DuckDB experimentam queries em ambientes serverless do celld, avaliando o desempenho e latência de cold start.
Fontes
- gordonmurray.iefonte original
- Categoria
- CEVIU Dados
- Publicado
- 10 de setembro de 2026
- Editoria
- CEVIU Dados