Cursul acoperă procesul end-to-end de data engineering cu Azure Databricks și Unity Catalog, de la configurarea mediului până la implementarea în producție. Participanții învață să configureze mediul Azure Databricks, să implementeze guvernanță și securitate la nivel enterprise, să construiască pipeline-uri robuste pentru ingestia datelor și să implementeze workload-uri optimizate.
La finalul cursului, participanții vor avea competențele necesare pentru implementarea, securizarea și mentenanța soluțiilor lakehouse scalabile, în conformitate cu cerințele enterprise.
Cursul se adresează Data Engineers care au cunoștințe fundamentale despre conceptele de data analytics, o înțelegere de bază a stocării în cloud și familiaritate cu principiile de organizare a datelor.
Participanții ar trebui să fie familiarizați cu SQL și să aibă experiență în utilizarea Python, inclusiv a notebook-urilor, pentru activități de data engineering. De asemenea, este necesară familiaritatea cu Azure Databricks workspaces, Unity Catalog, tiparele de acces la date și conceptele de bază din data engineering și data warehousing.
- Să configurezi un mediu Azure Databricks.
- Să securizezi și să guvernezi obiectele Unity Catalog.
- Să pregătești și să procesezi date folosind Azure Databricks.
- Să construiești și să gestionezi procese de ingestie și procesare a datelor.
- Să implementezi și să menții pipeline-uri de date și workload-uri Azure Databricks.
- Să aplici practici de securitate și guvernanță pentru soluții lakehouse.
- Să implementezi și să menții soluții scalabile de data engineering.
Participanții trebuie să aibă:
- cunoștințe fundamentale despre conceptele de data analytics;
- o înțelegere de bază a stocării în cloud;
- familiaritate cu principiile de organizare a datelor;
- familiaritate cu SQL;
- experiență în utilizarea Python, inclusiv notebook-uri, pentru activități de data engineering;
- o bună înțelegere a Azure Databricks workspaces și Unity Catalog;
- familiaritate cu tiparele de acces la date și conceptele de bază din data engineering și data warehousing;
- cunoștințe fundamentale despre securitatea Azure, inclusiv Microsoft Entra ID;
- familiaritate cu elementele fundamentale ale Git.
- Set up and configure an Azure Databricks environment
- Explore Azure Databricks
- Understand Azure Databricks architecture
- Understand Azure Databricks Integrations
- Select and Configure Compute in Azure Databricks
- Create and organize objects in Unity Catalog
- Secure and govern Unity Catalog objects in Azure Databricks
- Secure Unity Catalog objects
- Govern Unity Catalog objects
- Prepare and process data with Azure Databricks
- Design and implement data modeling with Azure Databricks
- Ingest data into Unity Catalog
- Cleanse, transform, and load data into Unity Catalog
- Implement and manage data quality constraints with Azure Databricks
- Deploy and maintain data pipelines and workloads with Azure Databricks
- Design and implement data pipelines with Azure Databricks
- Implement Lakeflow Jobs with Azure Databricks
- Implement development lifecycle processes in Azure Databricks
- Monitor, troubleshoot and optimize workloads in Azure Databricks
Nu sunt programe de certificare în acest moment.

