DP-3012 Implementing a Data Analytics Solution with Azure Synapse Analytics

Ziele

In dieser 1-tägigen Schulung "DP-3012 Implementing a Data Analytics Solution with Azure Synapse Analytics" mit einem Dozenten erhalten die Teilnehmer Anweisungen zu den SQL Dedicated- und Serverless Spark Pools. Es wird eine Anleitung zum Datenwrangling und zum ELT-Prozess mit Synapse Pipelines gegeben, die sehr ähnlich denen von Azure Data Factory (ADF) sind. Das Ziel ist es, Daten in die Datenbank des Synapse Dedicated Pools zu übertragen.

Zielgruppe

• Administrator
• Data Engineer

Voraussetzungen

Für eine optimale Teilnahme am Kurs empfehlen wir folgende Vorkenntnisse:

• Erfahrung in einer Spark-Engine, wie Databricks oder Jupyter Notebooks
• Kenntnisse in SQL und Python
• Erfahrungen mit Azure-Tools wie Data Factory

Agenda

Einführung in Azure Synapse Analytics

• Was ist Azure Synapse Analytics?
• Wie funktioniert Azure Synapse Analytics?
• Wann sollte man Azure Synapse Analytics verwenden?

Verwendung des serverlosen SQL-Pools von Azure Synapse zum Abfragen von Dateien in einem Data Lake

• Verständnis der Funktionen und Anwendungsfälle des serverlosen SQL-Pools von Azure Synapse
• Abfrage von Dateien mit einem serverlosen SQL-Pool
• Erstellung externer Datenbankobjekte

Datenanalyse mit Apache Spark in Azure Synapse Analytics

• Kennenlernen von Apache Spark
• Verwendung von Spark in Azure Synapse Analytics
• Datenanalyse mit Spark
• Visualisierung von Daten mit Spark

Verwendung von Delta Lake in Azure Synapse Analytics

• Visualisierung von Daten mit Spark
• Erstellung von Delta Lake-Tabellen
• Erstellung von Katalogtabellen
• Verwendung von Delta Lake mit Streaming-Daten
• Verwendung von Delta Lake in einem SQL-Pool

Datenanalyse in einem relationalem Data Warehouse

• Entwurf eines Schemas für ein Data Warehouse
• Erstellung von Data Warehouse-Tables
• Laden von Data Warehouse-Tables
• Abfrage eines Data Warehouses

Aufbau einer Datenpipeline in Azure Synapse Analytics

• Verständnis von Pipelines in Azure Synapse Analytics
• Erstellung einer Pipeline in Azure Synapse Studio
• Definition von data flows
• Ausführung einer Pipeline