Enquanto o Iceberg resolve esse problema, padrões abertos são necessários em outras áreas também. Agora estamos vendo um novo campo de batalha emergindo na área de catálogos de dados, que desempenham um papel crítico em uma arquitetura multi-engine. Os catálogos tornam as operações em tabelas confiáveis ao suportar transações atômicas. Isso significa que os engenheiros de dados e os pipelines que eles constroem podem modificar tabelas simultaneamente, e as consultas nessas tabelas produzem resultados precisos. Para fazer isso, todas as operações de leitura e gravação de tabelas Iceberg, mesmo de diferentes engines, são roteadas por meio de um catálogo.
Os provedores de SaaS e os hyperscalers podem usar o catálogo como uma forma de criar fidelidade do cliente, mas as empresas estão ficando mais sábias quanto a isso. Elas entendem que, assim como o Iceberg fornece um formato comum para tabelas, um padrão de catálogo aberto permitirá que elas escolham a melhor ferramenta para o trabalho e maximizem o valor de seus dados.
Padrões abertos são bons para os negócios, bons para os clientes e bons para o ecossistema mais amplo. As empresas têm arquiteturas de dados complexas, e os padrões abertos permitem que elas usem dados em todas essas plataformas sem incorrer em custos adicionais e desafios de governança. Os padrões abertos também promovem a inovação, porque forçam as empresas a competir em uma implementação e permitem que os clientes escolham entre elas.
