The New Stack amplia visao sobre infraestrutura cloud-native, plataformas de desenvolvimento e en...

A história real aqui não é o benchmark de 13 minutos—é o que essa velocidade revela sobre para onde a tecnologia CDC está indo. Passei anos lutando com pipelines de replicação do Postgres, e o surgimento de conectores especializados como o sink Iceberg do Supermetal sinaliza uma mudança fundamental: a camada de abstração da plataforma de dados está se movendo, saindo de topologias pesadas em Kafka e Flink em direção a caminhos diretos source-to-lakehouse. Isso importa porque impacta diretamente a composição do time e o peso operacional. Em vez de manter clusters Kafka, registros de schema e jobs Flink complexos apenas para landing dados CDC no Iceberg, times menores conseguem agora alcançar throughput comparável com significativamente menos peças móveis. A implicação arquitetural é clara—estamos vendo convergência para sistemas mais simples, menos distribuídos, que ainda atendem SLAs. Minha recomendação: avalie honestamente sua infraestrutura CDC atual. Se você está rodando Kafka Connect ou Flink principalmente como ponte para Iceberg, explore se ferramentas mais novas reduzem seu footprint operacional sem sacrificar confiabilidade ou custo.