Giter VIP home page Giter VIP logo

azure-data-factory's Introduction

Azure Data Factory

Aprender a automatizar processos de ETL no Azure Data Factory

Keywords: Data Platform, Execute SQL Scripts, Information Management, SQL Scripts, Data, Azure Stream Analytics, Azure, ADF, SQL Data Sync, Azure Machine Learning, SQL Server Management, Azure Data, SSIS, Azure Synapse Analytics, Azure Data Factory

😉 Gostou do conteúdo? Inscreva-se também no canal: http://www.fabioms.com.br/?url=youtube-subscribe

Youtube playlist: https://youtube.com/playlist?list=PL3CylihEP9UReYhK7ltrHKVFb5rNHPkQ4

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-copiar-dados-internet

Podemos migrar os pacotes do Integration Services para o Azure Data Factory utilizando a ferramenta Microsoft Visual Studio.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-ssis-migrar-pacotes

Apresentamos nesse vídeo como ler o arquivo XML de nota fiscal eletrônica armazenado no Azure Blob Storage e carregar seu conteúdo no Azure SQL Database.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-ler-nota-fiscal

Conhecer nesse vídeo a palestra que realizei no evento MVPConf 2020.

Organizado por profissionais reconhecidos pela Microsoft na área em que atuam e os valores dos ingressos são repassados a instituições de caridades.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-mvpconf-2020

Nesse vídeo apresentamos como copiar dados de um banco de dados MS Access existente em um servidor on-premises para o Azure SQL Database.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-copiar-banco-msaccess

Podemos utilizar o Data Flow do Azure Data Factory para agregar os valores de uma tabela e combinar duas tabelas salvando o resultado no Azure Blob Storage em formato CSV.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-dataflow-combinar-tabelas

Apresentamos como utilizar o Power Query do Azure Data Factory para combinar valores de tabelas e salvar o resultado em formato CSV no Azure Blob Storage.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-combinar-tabelas

Apresentamos nesse vídeo iremos conhecer o que é o Azure Data Factory, os seus elementos essencias como Linked Services, Pipelines, Datasets, entre outros.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-quanto-custa-como-criar-recurso

Apresentamos nesse vídeo como controlar a versão dos objetos do Azure Data Factory utilizando a integração do repositório do Azure DevOps, facilitando na colaboração entre equipes e nas mudanças executadas no código JSON associado.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-controle-versao-devops

Apresentamos nesse vídeo como conectar o Azure Data Factory aos recursos computacionais da infraestrutura on-premises utilizando o Integration Runtime Auto-Hospedado (Self-Hosted).

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-conectar-on-premises

Nesse vídeo apresentamos a técnica web scraping utilizando o Azure Data Factory, extraindo os valores de uma tabela existente em página da internet de cotações da bolsa de valores.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-webscraping-webtable

Apresentamos nesse vídeo como extrair dados da internet utilizando a funcionalidade de conteúdo dinâmico para alterar a consulta SQL contendo o período de datas a serem extraídas

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-extrair-dados-conteudo-dinamico

Nesse vídeo apresentamos como copiar os dados existentes do banco de dados SAP HANA para um arquivo em formato Parquet no Azure Data Lake Storage utilizando o Azure Data Factory.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-copiar-dados-sap-hana

Apresentamos nesse vídeo como carregar planilhas eletrônicas do Azure Data Lake Storage removendo os registros duplicados, e configurando o gatilho para executar quando um novo arquivo é criado.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-remover-registros-duplicados

Apresentamos nesse vídeo como conceder acesso de aplicativo no Sharepoint para obter os dados de uma lista e armazenar em tabela do banco de dados Azure SQL utilizando o Azure Data Factory.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-copiar-dados-sharepoint

<AppPermissionRequests AllowAppOnlyPolicy="true">
  <AppPermissionRequest Scope="http://sharepoint/content/sitecollection/web" Right="FullControl"/>
</AppPermissionRequests>

Microsoft Learn https://learn.microsoft.com/en-us/sharepoint/dev/sp-add-ins/add-in-permissions-in-sharepoint

Apresentamos nesse vídeo como extrair conteúdo de arquivo compactado (ZIP) existente no Github e descompactar no Azure Data Lake utilizando Azure Data Factory.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-extrair-conteudo-arquivo-zip

Apresentamos nesse vídeo como executar pipeline dentro de uma interação loop para modular e reaproveitar tarefas executadas, nesse caso, a extração de vários arquivos compactados no Github para Azure Data Lake.

Assista ao vídeo: http://www.fabioms.com.br/?url=azure-data-factory-pipeline-loop-parametros

azure-data-factory's People

Contributors

fabioms-br avatar

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.