#016 Como extrair, transformar e carregar dados no Azure Data Factory

1. Como mapear colunas dinâmicas no Azure Data Factory

20m 41s   140   5  

Como mapear colunas dinamicamente no Azure Data Factory para ajustar a correspondência entre as colunas de origem e destino

2. Como copiar dados do MYSQL utilizando o Azure Data Factory

11m 31s   493   18  

Como copiar dados do banco de dados MySQL e armazenar no Azure Data Lake em arquivo formato Parquet utilizando o Azure Data Factory

3. Palestra Do Azure Databricks ao Power BI no MVPConf 2021

46m 43s   168   16  

4. Como criar e quanto custa o Azure Data Factory

16m 54s   6195   309  

Apresentamos nesse vídeo iremos conhecer o que é o Azure Data Factory, os seus elementos essencias como Linked Services, Pipelines, Datasets, entre outros.

5. Copiar dados em formato CSV da internet utilizando Azure Data Factory

20m 19s   2576   105  

6. Como copiar dados do SharePoint no Azure Data Factory

12m 26s   8584   95  

Como obter os dados de uma lista no SharePoint e armazenar em tabela do banco de dados Azure SQL utilizando o Azure Data Factory

7. Como conectar recursos locais no Azure Data Factory

14m 1s   3259   106  

Apresentamos nesse vídeo como conectar o Azure Data Factory aos recursos computacionais da infraestrutura on-premises utilizando o Integration Runtime Auto-Hospedado (Self-Hosted).

8. Como Copiar Dados do Banco de Dados MS Access | Azure Data Factory

12m 20s   2226   36  

Como copiar dados de um banco de dados MS Access existente em um servidor on-premises para o Azure SQL Database

9. Copiar dados do SAP HANA para Azure Data Lake no Azure Data Factory

9m 16s   2885   63  

Nesse vídeo apresentamos como copiar os dados existentes do banco de dados SAP HANA para um arquivo em formato Parquet no Azure Data Lake Storage utilizando o Azure Data Factory.

10. Como extrair dados por conteúdo Dinâmico no Azure Data Factory

12m 8s   1510   65  

Apresentamos nesse vídeo como extrair dados da internet utilizando a funcionalidade de conteúdo dinâmico para alterar a consulta SQL contendo o período de datas a serem extraídas #microsoft #dataplatform #azure #datafactory #http #etl #integrationruntime #selfhosted #onpremises #mvp #dicadofabinho

11. Como remover registros duplicados no Azure Data Factory

10m 42s   1691   33  

Apresentamos nesse vídeo como carregar planilhas eletrônicas do Azure Data Lake Storage removendo os registros duplicados, e configurando o gatilho para executar quando um novo arquivo é criado.

12. Como ler arquivo XML de nota fiscal eletrônica no Azure Data Factory

12m 4s   1258   50  

Apresentamos nesse vídeo como ler o arquivo XML de nota fiscal eletrônica armazenado no Azure Blob Storage e carregar seu conteúdo no Azure SQL Database.

13. Como combinar valores de tabelas com Power Query no Azure Data Factory

14m 17s   1720   29  

Apresentamos como utilizar o Power Query do Azure Data Factory para combinar valores de tabelas e salvar o resultado em formato CSV no Azure Blob Storage.

14. Como Combinar Valores de Tabelas com Dataflow no Azure Data Factory

16m 24s   751   50  

Como utilizar o Data Flow do Azure Data Factory para combinar valores detabelas, salvando o resultado em formato CSV no Azure Data Lake

15. Como salvar JSON para banco de dados Azure SQL no Azure Data Factory

16m 56s   2378   25  

Apresentamos nesse vídeo como copiar parte do resultado em formato JSON para salvar no banco de dados SQL do Azure utilizando o Azure Data Factory.

16. Como Extrair contéudo de Arquivo Compactado no Azure Data Factory

9m 16s   1051   24  

Como extrair conteúdo de arquivo compactado (ZIP) existente no Github e descompactar no Azure Data Lake utilizando Azure Data Factory

17. Como executar Pipeline em Loop no Azure Data Factory

8m 1s   1251   30  

Apresentamos nesse vídeo como executar pipeline dentro de uma interação loop para modular e reaproveitar tarefas executadas, nesse caso, a extração de vários arquivos compactados no Github para Azure Data Lake.

18. Como Fazer Web Scraping no Azure Data Factory

9m 56s   1059   57  

Apresentamos nesse vídeo a técnica de garinpar dados conhecida como web scraping utilizando o Azure Data Factory, extraindo os valores de cotações da bolsa de valores em tabela de página da internet

19. Como fazer controle de versão no Azure Data Factory com Azure DevOps

10m 46s   885   54  

Apresentamos nesse vídeo como controlar a versão dos objetos do Azure Data Factory utilizando a integração do repositório do Azure DevOps, facilitando na colaboração entre equipes e nas mudanças executadas no código JSON associado.

20. Como publicar pacotes Integration Services para Azure Data Factory

6m 14s   654   37  

Podemos migrar os pacotes do Integration Services para o Azure Data Factory utilizando a ferramenta Microsoft Visual Studio.

21. Palestra Do Azure Data Factory ao Powerbi do MVPConf 2020

31m 18s   1150   59  

Conhecer nesse vídeo a palestra que realizei no evento MVPConf 2020. Organizado por profissionais reconhecidos pela Microsoft na área em que atuam e os valores dos ingressos são repassados a instituições de caridades.