Orchestrazione della pipeline dei dati con AWS MWAA e Glue

Questo corso di sola lettura ti guiderà attraverso i flussi di lavoro gestiti di AWS per Apache Airflow (MWAA) e i flusso di lavoro di AWClue, aiutandoti a scegliere e implementare la soluzione giusta per le tue esigenze di ingegneria dei dati. Capirai come strutturare le attività, gestire le dipendenze e risolvere gli errori utilizzando pratiche di registrazione moderne. Cosa imparerai: 1.Impara i concetti fondamentali di orchestrazione dei dati, DAG e stati del flusso di lavoro. 2. Configura i flussi di lavoro AWS Glue per attività di integrazione dati serverless e basate su eventi. 3. Crea DAG Apache Airflow robusti utilizzando Python, suggerimenti per i tipi moderni e best practice. Applicare i framework decisionali per scegliere il servizio di orchestrazione ottimale per la tua architettura.6.Comprendere i concetti di base dell'infrastruttura come codice per la distribuzione di ambienti di orchestrazioni. Il corso inizia con la terminologia essenziale e i concetto di orchestrazione fondamentali prima di immergersi in configurazioni pratiche. Questo corso è progettato per ingegneri di dati principianti, professionisti del cloud e sviluppatori che cercano di automatizzare i loro flussi di lavoro dei dati. Non è richiesta alcuna esperienza precedente con MWAA o Glue, anche se è utile avere una conoscenza di base di Python e dei concetti cloud.