Apresentamos nesse vídeo a técnica de garinpar dados conhecida como web scraping utilizando o Azure Data Factory, extraindo os valores de cotações da bolsa de valores em tabela de página da internet
?Crear SERVICIO VINCULADO, TABLA WEB;?Usar Integration Runtime Autohospedado (INTEGRATION RUNTIME SELF-HOSTED); ?Establecer la URL del sitio web para las cotizaciones de la bolsa de valores (YAHOO FINANCE); ?Crear tabla web de conjunto de datos de origen (DATASET, WEB TABLE, SOURCE); ?Establezca el índice de la tabla y obtenga una vista previa de los datos (ÍNDICE, VISTA PREVIA DE DATOS); ?Crear un sistema de archivos de conjunto de datos de destino (DATASET, FILE SYSTEM, SINK)Establecer ?el tipo de formato de archivo (DELIMITEDTEXT);?Crear canalización con PIPELINE, COPIAR ACTIVIDAD DE DATOS; ?Tipo de datos de mapa de columnas (IMPORTAR ESQUEMAS); ?Ejecutado por Trigger Pipeline (TRIGGER NOW); ?Ver el resultado del archivo generado en el servidor local (CSV, WINDOWS SERVER).
Científico de datos y consultor de soluciones digitales y analíticas
@fabioms