Databricks — Lakehouse, Spark & Delta Lake

Cette formation présente Databricks comme plateforme de traitement, stockage et exploitation des données. Les participants apprennent les fondamentaux Lakehouse, Spark, notebooks, jobs et Delta Lake. L'accent est mis sur la fiabilité des pipelines, la performance et la gouvernance des données. Elle est adaptée aux équipes data qui veulent industrialiser leurs traitements batch et analytics.

• Data engineers • Data scientists • Architectes data • Développeurs Python/SQL • Équipes BI avancées

• Bases SQL indispensables. • Notions Python recommandées. • Compréhension générale des architectures data lake ou data warehouse. • Connaissance cloud utile mais non obligatoire.

• 1Comprendre l'architecture Lakehouse Databricks.
• 2Manipuler notebooks, clusters et jobs.
• 3Utiliser Spark SQL et PySpark sur des jeux de données.
• 4Exploiter Delta Lake pour fiabiliser les traitements.
• 5Comprendre les principes de gouvernance et d'industrialisation.

1. 01

   Concept Lakehouse

   Concept Lakehouse Situer Databricks entre data lake, data warehouse, BI et IA.

2. 02

   Notebooks et environnement

   Prendre en main workspace, notebooks, clusters, catalogues et collaboration.

3. 03

   Spark SQL et PySpark

   Transformer des données avec SQL et Python dans un environnement distribué.

4. 04

   Delta Lake

   Gérer fiabilité, historique, schémas, transactions et optimisation des tables.

5. 05

   Industrialisation

   Créer des jobs, surveiller les traitements et structurer une chaîne data maintenable.

Apports théoriques structurés et contextualisés. Démonstrations guidées sur la solution ou environnement simulé. Travaux pratiques et cas d'usage métier. Échanges avec le formateur et retours d'expérience. Support numérique remis aux participants.

TP fil rouge sur pipeline Lakehouse. QCM technique et restitution d'un workflow Databricks documenté.

Documents délivrés : Support de cours PDF. Fiches mémo Spark/Delta. Exemples notebooks. Checklist industrialisation. Attestation de fin de formation.

Nos formations sont accessibles aux personnes en situation de handicap. Contactez notre référent handicap pour un accompagnement personnalisé.

• Attestation