Initiation aux fondamentaux du data engineering
Cette formation offre une introduction claire et accessible aux principes fondamentaux du data engineering. Elle permet de comprendre le fonctionnement des pipelines de données, les étapes de collecte et de transformation des données, ainsi que les rôles des p
Créez votre compte gratuit
Comment se déroule le cours
Chaque leçon est un texte structuré, illustré d’exemples et de schémas, suivi d’un quiz corrigé automatiquement. Vous avancez à votre rythme, et vos notes restent attachées à la leçon où vous les avez prises.
-
Acquérir une bonne compréhension des concepts fondamentaux du data engineering
-
Comprendre les différentes étapes de la collecte, de la transformation et du stockage des données
-
Découvrir le fonctionnement des pipelines de données et leurs principales applications
-
Identifier les outils et technologies utilisés dans les environnements de traitement des données
-
Développer les connaissances nécessaires pour comprendre les enjeux de qualité, de fiabilité et de sécurité des données
-
Data engineer junior : participation à la collecte, à la transformation et au stockage des données.
-
Développeur de pipelines de données : conception et automatisation des flux de données.
-
Assistant data analyst : préparation et organisation des données destinées aux analyses.
-
Administrateur de bases de données junior : gestion, organisation et maintenance des bases de données.
-
Technicien en gestion des données : contrôle de la qualité et de la cohérence des informations.
-
Analyste de données : exploitation des données pour identifier des tendances et produire des analyses.
-
Consultant junior en data engineering : accompagnement des organisations dans la mise en place de solutions de gestion des données.
-
Spécialiste en intégration de données : collecte et centralisation des informations provenant de différentes sources.
-
Assistant en architecture de données : participation à la conception et à l'organisation des systèmes de stockage et de traitement des données.
Accessibilité

Vous êtes en situation de handicap et souhaitez suivre une formation chez nous, cet email vous est dédié : contact@datagoz.com . Pour toute autre situation, n'hésitez pas à nous contacter pour évaluer comment assurer une expérience d'apprentissage.
Comment financier ma formation ?
Attestation de réussite : à la fin de ce cours, une attestation de réussite DATAGOZ, nominative et vérifiable en ligne, vous est délivrée.
L'équipe DATAGOZ vous souhaite une bonne formation !
6 chapitres, 59 leçons
- 2. Les fondamentaux de l’ingénierie des donnéesouvert
- 2. Les missions et responsabilités d’un ingénieur dataouvert
- 2. Ingénieur data et data scientist, comprendre leurs différencesouvert
- 2. Les principaux défis de l’ingénierie des donnéesouvert
- 2. Les technologies et outils du data engineerouvert
- 2. Panorama des différents types de bases de donnéesouvert
- 2. Gestion et exécution des traitements de donnéesouvert
- 2. Automatisation et planification des tâchesouvert
- 2. Découverte des fournisseurs de services cloudouvert
- 2. Les avantages du cloud computingouvert
- 2. Présentation des principaux fournisseurs cloudouvert
- 2. Les différents services proposés dans le cloudouvert
- 3. Les différents systèmes de gestion de bases de donnéesabonnés
- 3. Comparer les bases de données SQL et NoSQLabonnés
- 3. Conception et organisation des schémas de bases de donnéesabonnés
- 3. Combiner des tables grâce aux jointures relationnellesabonnés
- 3. Modélisation des données avec le schéma en étoileabonnés
- 3. Comprendre les principes du calcul parallèleabonnés
- 3. Les avantages du traitement parallèle des donnéesabonnés
- 3. Décomposer un traitement en plusieurs tâches indépendantesabonnés
- 3. Manipuler les données à l’aide des DataFramesabonnés
- 3. Les principaux frameworks de calcul distribuéabonnés
- 3. Découvrir les technologies Spark, Hadoop et Hiveabonnés
- 3. Regrouper et agréger des données avec PySparkabonnés
- 3. Exécuter et gérer des scripts PySparkabonnés
- 3. Les outils de planification et d’orchestration des workflowsabonnés
- 3. Automatiser les traitements avec Airflow, Prefect et cronabonnés
- 3. Créer et organiser des DAG avec Apache Airflowabonnés
- 4. Les différentes méthodes d’extraction des donnéesabonnés
- 4. Identifier et explorer les sources de donnéesabonnés
- 4. Extraire des informations à partir d’une APIabonnés
- 4. Importer des données depuis une base de donnéesabonnés
- 4. Les étapes de transformation des donnéesabonnés
- 4. Extraire et décomposer les informations relatives aux prix de locationabonnés
- 4. Préparer et organiser les opérations de transformationabonnés
- 4. Enrichir les données grâce aux jointures avec les évaluationsabonnés
- 4. Les méthodes de chargement des donnéesabonnés
- 4. Comprendre les différences entre OLAP et OLTPabonnés
- 4. Exporter les données dans des fichiersabonnés
- 4. Insérer et stocker des données dans PostgreSQLabonnés
- 4. Assembler les différentes étapes d’un processus ETLabonnés
- 4. Construire un graphe orienté acyclique (DAG)abonnés
- 4. Configurer un environnement Apache Airflowabonnés
- 4. Analyser et comprendre la structure d’un DAGabonnés
- 5. Prendre connaissance de la documentation des coursabonnés
- 5. Découvrir la structure de la base de donnéesabonnés
- 5. Explorer les données à l’aide de requêtes SQLabonnés
- 5. Calculer la note moyenne attribuée à chaque coursabonnés
- 5. Exploiter les évaluations pour formuler des recommandationsabonnés
- 5. Détecter et exclure les données erronéesabonnés
- 5. Appliquer les transformations nécessaires à la génération de recommandationsabonnés
- 5. Automatiser la planification des traitements quotidiensabonnés
- 5. Déterminer la table de destination des donnéesabonnés
- 5. Construire le DAG pour orchestrer le processusabonnés
- 5. Activer et lancer le DAGabonnés
- 5. Interroger les données pour obtenir les recommandations généréesabonnés
- 5. Bilan du projet d’ingénierie des donnéesabonnés
Tout ce qui accompagne les leçons
Combien de temps, selon votre disponibilité
Ce que vous obtenez à la fin
Quand le cours est terminé, l’attestation est délivrée à votre nom. Son code permet à un recruteur de la vérifier en quelques secondes.
Ce n’est pas un diplôme ni une certification professionnelle ; c’est la preuve vérifiable que vous avez suivi et réussi ce cours.
Qui écrit ce cours
Une pédagogie claire et appliquée, avec des exemples concrets pour apprendre efficacement.
Avant de commencer
Commencez ce cours aujourd'hui
13 leçons ouvertes, sans carte bancaire. Vous verrez le niveau et le ton avant de décider.