Ir para o conteúdo principal

Lakebase Change Data Feed: sincronize o Lakebase com o Unity Catalog (Autoscaling)

Replique tabelas do Lakebase Autoscaling Postgres no Unity Catalog como tabelas Delta gerenciadas usando o Lakebase Change Data Feed (CDF), com histórico completo SCD Tipo 2.

Prévia de Lakebase Change Data Feed: sincronize o Lakebase com o Unity Catalog (Autoscaling)

Crie com IA

  1. Copie o prompt abaixo
  2. Cole-o no Cursor, Claude Code, Codex ou em qualquer agente de programação
  3. Seu agente cria o app, fazendo perguntas ao longo do processo para que o resultado seja exatamente como você deseja

Não conhece os modelos? Saiba mais aqui

Ao concluir, você terá:

  • Tabelas de histórico Delta no Unity Catalog com rastreamento completo de alterações para cada inserção, atualização e exclusão
  • Replicação CDC contínua do Lakebase Autoscaling Postgres para o lakehouse, sem compute externo
  • Dados operacionais consultáveis em Spark SQL, notebooks, ferramentas de BI e pipelines downstream

Prerequisites

Verifique se estes recursos do workspace do Databricks estão habilitados antes de começar. O Lakebase Change Data Feed (CDF, anteriormente Lakehouse Sync) está em Public Preview e tem requisitos de workspace mais rígidos do que a maioria dos outros modelos.

  • Um workspace na AWS ou no Azure em uma região com Lakebase Autoscaling. O Change Data Feed está disponível em Public Preview tanto na AWS (*.cloud.databricks.com) quanto no Azure (*.azuredatabricks.net). Um administrador do workspace precisa primeiro habilitar o preview do Lakebase Change Data Feed na página Previews do workspace.
  • Um projeto Lakebase Autoscaling com tabelas. Execute databricks postgres list-projects --profile <PROFILE> e confirme se o seu projeto de Autoscaling aparece na lista. Um erro not enabled indica que o Lakebase não está disponível para essa identidade. Este modelo não cobre a criação de projetos — consulte Criar um projeto Lakebase caso precise de um.
  • Acesso ao Unity Catalog. Execute databricks catalogs list --profile <PROFILE> e confirme se o catálogo e o schema de destino para os quais você quer replicar estão presentes. Você os selecionará ao habilitar o Change Data Feed.