Pular para o conteúdo principal
Procore

Exportar para o Fabric Lakehouse usando o Data Factory

Visão geral

A integração do Compartilhamento Delta com o Microsoft Fabric Data Factory permite o acesso e o processamento contínuos de tabelas Delta compartilhadas para seus fluxos de trabalho de análise com o Procore Analytics 2.0. O Delta Sharing, um protocolo aberto para colaboração segura de dados, garante que as organizações possam compartilhar dados sem duplicação.

Pré-requisitos

  •  Procore Analytics 2.0 SKU
  • Credenciais de compartilhamento Delta:
    • Obtenha o arquivo share.json (ou equivalente) Delta Sharing credenciais do seu provedor de dados.
    • Esse arquivo deve incluir:
      • Ponto de extremidade URL: O Delta Sharing Server URL.
      • Token ao portador: Usado para acesso seguro a dados.
  • Instalação do Microsoft Fabric:
    • Uma conta de locatário do Microsoft Fabric com uma assinatura ativa.
    • Acesso a um espaço de trabalho habilitado para Microsoft Fabric.

Passos

Alternar para a experiência do Data Factory

  1. Navegue até o Espaço de Trabalho do Microsoft Fabric.
    clipboard_efd065fed3e214b84c9b311d011d8ae67.png
     
  2. Selecione Novo e, em seguida, escolha Dataflow Gen2.
    clipboard_e73cb72aa551cc8730795b5bd53bb8a7a.png

Configurar o fluxo de dados

  1. Vá para o editor de fluxo de dados.
  2. Clique em Obter dados e selecione Mais.
  3. Em Nova fonte, selecione Delta Sharing Other como a fonte de dados.
    clipboard_efb6b95e01a2211ba291f186035b8b4ab.png
  4. Insira os seguintes detalhes:
    • URL: Do arquivo de configuração do Compartilhamento Delta.
    • Token ao portador: encontrado no arquivo config.share.
      clipboard_eb997dd0c67cf6e2bcf47cfc9d7e5d71c.png
  5. Clique em Avançar e selecione as tabelas desejadas.
  6. Clique em Criar para concluir o configuração.

Realizar transformações de dados

Depois de configurar o fluxo de dados, agora você pode aplicar transformações aos dados Delta compartilhados. Escolha sua opção Delta Sharing Data na lista abaixo:

  • Adicionar destino de dados
  • Criar/Abrir Lakehouse

Adicionar destino de dados

  1. Vá para Data Factory.
  2. Clique em Adicionar destino de dados.
  3. Selecione Lakehouse como destino e clique em Avançar.
  4. Escolha seu destino e confirme clicando em Avançar.

Criar-Open Lakehouse

  1. Crie/abra sua Lakehouse e clique em Obter dados.
  2. Selecione Novo Dataflow Gen2.
  3. Clique em Obter Dados, depois em Mais e localize Compartilhamento Delta.
  4. Insira o token de portador de URL do arquivo config.share e selecione Next.
  5. Escolha seus dados/tabela/s para baixar e clique em Avançar.
  6. Após essas manipulações, você deve ter todos os dados selecionados em seu Fabric Lakehouse.

Validação e Monitoramento

Teste seus pipelines e fluxos de dados para garantir uma execução suave. Usar ferramentas de monitoramento nos dados
Fábrica para acompanhar o progresso e os registros de cada atividade.