Como criar e quanto custa o Azure Data Factory

Iremos conhecer as técnicas:

1. O que é Azure Data Factory (LINKED SERVICES, DATASET, PIPELINE, ACITIVITY, POWER QUERY):

• O Azure Data Factory é um serviço de orquestração de dados na nuvem da Microsoft. Ele permite criar, agendar e gerenciar fluxos de dados de e para diferentes fontes, transformando e movendo esses dados entre locais. Os principais conceitos do Azure Data Factory incluem:
  • Linked Services: São conexões que definem informações sobre a fonte de dados ou o destino.
  • Dataset: Representa um conjunto de dados que é usado na construção de atividades nos pipelines.
  • Pipeline: Uma série de atividades ou tarefas que são executadas em uma ordem lógica.
  • Activity: Uma unidade de trabalho em um pipeline, representando uma tarefa individual.
  • Power Query: Uma ferramenta de transformação de dados usada no processo de ETL (Extract, Transform, Load).

2. Conexões de conjunto de dados e computação em nuvem:

• O Azure Data Factory suporta conexões com uma variedade de fontes de dados, incluindo serviços em nuvem, bancos de dados locais, sistemas locais, entre outros. As conexões de conjunto de dados definem a forma como os dados são acessados, e a computação em nuvem permite processamento distribuído e escalável.

3. Calcular custo do recurso utilizando calculadora de preços (AZURE PRICE CALCULATOR):

• A Calculadora de Preços do Azure é uma ferramenta online que permite estimar os custos associados ao uso de serviços do Azure, incluindo o Azure Data Factory. Você pode configurar os parâmetros relevantes, como a quantidade de dados processados, e obter uma estimativa dos custos associados ao uso desses recursos.

4. Criar recurso no portal do Azure (DATA FACTORY):

• Para criar um recurso Azure Data Factory no Portal do Azure, você pode seguir os passos abaixo:
  1. Acesse o Portal do Azure.
  2. Clique em "Create a resource" (Criar um recurso) no painel esquerdo.
  3. Pesquise por "Data + Analytics" e selecione "Data + Analytics" na lista de resultados.
  4. Escolha "Data + Analytics" e, em seguida, selecione "Data + Analytics" novamente.
  5. Preencha as informações necessárias, como nome, assinatura, grupo de recursos, região, entre outras.
  6. Clique em "Review + create" (Revisar + criar) e, em seguida, em "Create" (Criar) para criar o recurso.

Esses conceitos e práticas são fundamentais para entender e utilizar eficientemente o Azure Data Factory na orquestração de fluxos de dados e processos de ETL na nuvem da Microsoft.