Levando o AUTO CDC ao próximo nível: resolvendo os casos de uso reais mais difíceis
Traduzido do original em inglês por IA. Ver em inglês
O Spark Declarative Pipelines agora oferece suporte a Bitemporal AUTO CDC e Partial Updates, substituindo a lógica MERGE escrita manualmente por uma abordagem declarativa para rastrear o tempo de negócio e o tempo de sistema de forma independente, com segurança
* O AUTO CDC substitui a lógica MERGE escrita manualmente para captura de dados de alteração (CDC) por um pipeline declarativo * O Spark Declarative Pipelines agora oferece suporte a Bitemporal AUTO CDC para rastrear o tempo de negócio e o tempo de sistema de forma independente, além de Partial Updates para lidar com segurança com campos ausentes * Os recursos do AUTO CDC são expandidos para o Apache Spark 4.2 open source, trazendo captura de dados de alteração padronizada e fora de ordem (out-of-order) para todo o ecossistema