Apresentamos nesse vídeo a técnica de garinpar dados conhecida como web scraping utilizando o Azure Data Factory, extraindo os valores de cotações da bolsa de valores em tabela de página da internet
🔹Crear SERVICIO VINCULADO, TABLA WEB;
🔹Usar Integration Runtime Autohospedado (INTEGRATION RUNTIME SELF-HOSTED);
🔹Establecer la URL del sitio web para las cotizaciones de la bolsa de valores (YAHOO FINANCE);
🔹Crear tabla web de conjunto de datos de origen (DATASET, WEB TABLE, SOURCE);
🔹Establezca el índice de la tabla y obtenga una vista previa de los datos (ÍNDICE, VISTA PREVIA DE DATOS);
🔹Crear un sistema de archivos de conjunto de datos de destino (DATASET, FILE SYSTEM, SINK)Establecer
🔹el tipo de formato de archivo (DELIMITEDTEXT);
🔹Crear canalización con PIPELINE, COPIAR ACTIVIDAD DE DATOS;
🔹Tipo de datos de mapa de columnas (IMPORTAR ESQUEMAS);
🔹Ejecutado por Trigger Pipeline (TRIGGER NOW);
🔹Ver el resultado del archivo generado en el servidor local (CSV, WINDOWS SERVER).
Científico de datos y consultor de soluciones digitales y analíticas
@fabioms