Apache Iceberg 1.11.0 traz registerView e resolve lacuna crítica em migrações de catálogo

A versão 1.11.0 do Apache Iceberg não é só uma atualização de manutenção, é a consolidação da especificação V3 como padrão estável, com impacto direto na arquitetura de lakehouses abertos. O registerView resolve um ponto fraco crônico: antes, migrar views entre catálogos exigia recriação manual via SQL, perdendo contexto de lineage, tags e propriedades de segurança. Agora, basta apontar para o arquivo de metadados JSON da view e o Iceberg registra tudo nativamente. O endpoint REST Catalog ganhou carregamento com cache baseado em ETag e planejamento de varredura remoto, reduzindo a sobrecarga de memória no cliente e acelerando startups de jobs em até 40%, segundo benchmarks da comunidade.

Além disso, a criptografia de tabela integrada com hierarquia de três camadas (KMS + envelope encryption) e suporte nativo a AWS KMS, Google Cloud KMS e Azure Key Vault torna o Iceberg viável para cargas regulatórias em setores financeiro e de saúde, algo que Delta Lake ainda depende de integrações externas para atingir. A API unificada de Formato de Arquivo também prepara o terreno para codecs especializados em IA, como Puffin com vetores de exclusão Roaring, já usados por times de ML para acelerar upserts em tabelas de features sem fragmentação.

A cobertura anterior do CEVIU não havia abordado nenhuma versão do Iceberg, esta é a primeira menção direta ao projeto na newsletter. Portanto, não há evolução documentada na cobertura CEVIU sobre o Iceberg para comparar. A novidade é inteiramente nova no histórico editorial.

Essa release fecha lacunas operacionais que impediam adoção em produção em escala crítica: migrações de catálogo sem perda de metadados, recuperação de desastres com snapshots de views intactas e upgrades blue-green com zero downtime. Para engenheiros de dados, isso significa menos scripts personalizados de migração, menos risco de corrupção de lineage e maior confiança em pipelines que dependem de views parametrizadas. O fato de o Iceberg v3 estar agora disponível nativamente no Databricks Runtime 18.0+ e Snowflake, aliado à adoção de 78,6% como único formato de tabela em ambientes open lakehouse, mostra que essa não é uma mudança marginal, mas uma mudança de infraestrutura de dados.