Construction de pipelines de données modernes avec Snowflake, dbt et Airbyte

Les organisations sont aujourd'hui inondées de données, mais le véritable défi réside dans la transformation de ces informations brutes en valeur commerciale exploitable. Pour ce faire, les équipes de données modernes s'appuient sur une suite spécialisée d'outils connue sous le nom de Modern Data Stack. Ce cours textuel vous guide tout au long du cycle de vie de l'ingénierie de données moderne, en commençant par les définitions fondamentales avant de passer à la mise en œuvre des pipelines. Vous apprendrez à concevoir des pipelines robustes qui ingèrent, nettoient, transforment et activent les données dans votre organisation. Grâce à des explications écrites claires et à des extraits de code pratiques, vous acquerrez une compréhension approfondie du fonctionnement des écosystèmes de données modernes. Ce que vous apprendrez : - Comprendre l'architecture centrale de la Modern Data Stack, y compris les paradigmes Lakehouse et Data Mesh. - Configurer des pipelines d'ingestion de données à partir de diverses sources à l'aide d'outils tels qu'Airbyte et Fivetran. - Concevoir des solutions de stockage de données centralisées au sein d'un entrepôt de données cloud comme Snowflake. - Transformer les données brutes en modèles analytiques propres à l'aide de dbt et de SQL contrôlé par version. - Appliquer les principes de DataOps, y compris les tests automatisés et les flux de travail de pipeline de base, pour garantir la qualité des données. - Activer vos données transformées en les synchronisant avec les applications métier à l'aide de concepts Reverse ETL et d'outils tels que Hightouch. Le cours commence par la terminologie essentielle et les concepts architecturaux avant de vous guider pas à pas dans des guides écrits sur l'ingestion, la transformation et l'activation. Conçu pour les débutants, les ingénieurs de données en herbe et les analystes cherchant à moderniser leurs compétences, ce cours ne nécessite aucune expérience préalable des entrepôts de données cloud. Commencez à lire dès aujourd'hui pour maîtriser les outils modernes qui pilotent les organisations axées sur les données.