Building Batch Data Analytics Solutions on AWS

Seminarinformationen

Seminar - Ziel

In dieser 1-tägigen Schulung "Building Batch Data Analytics Solutions on AWS" lernen Sie die Erstellung von Batch-Datenanalyselösungen mit Amazon EMR, einem Managed Service für Apache Spark und Apache Hadoop. Sie werden mit Open-Source-Projekten wie Apache Hive, Hue und HBase sowie AWS-Services wie AWS Glue und AWS Lake Formation vertraut gemacht. Der Kurs behandelt die Datensammlung, -aufnahme, -katalogisierung, -speicherung und -verarbeitung im Kontext von Spark und Hadoop. Die Verwendung von EMR Notebooks zur Unterstützung von Analysen und Machine Learning wird ebenfalls behandelt. Dabei liegt ein besonderer Fokus auf Best Practices für Sicherheit, Performance und Kostenmanagement bei der Nutzung von Amazon EMR.

In diesem Kurs lernen Sie die Funktionen und Vorteile von Data Warehouses, Data Lakes und modernen Datenarchitekturen zu vergleichen. Sie werden eine Batch-Datenanalyselösung entwerfen und implementieren und geeignete Techniken zur Optimierung der Datenspeicherung anwenden. Darüber hinaus lernen Sie, die richtigen Optionen zur Aufnahme, Umwandlung und Speicherung von Daten auszuwählen und die für Ihre Anforderungen passenden Instanz- und Node-Typen, Cluster, automatische Skalierung und Netzwerktopologie auszuwählen. Sie werden verstehen, wie Datenspeicherung und -verarbeitung die Analyse- und Visualisierungsmechanismen beeinflussen, um verwertbare Erkenntnisse zu gewinnen. Die Schulung beinhaltet auch das Sichern von Daten im Ruhezustand und bei der Übertragung sowie das Monitoring von analytischen Workloads, um Probleme zu identifizieren und zu beheben. Sie lernen außerdem Best Practices für das Kostenmanagement anzuwenden.

Teilnehmer - Zielgruppe

  • Ingenieure für Datenplattformen
  • Entwickler und Operatoren, die Datenanalyse-Pipelines aufbauen und verwalten

Kurs - Voraussetzungen

Für eine optimale Teilnahme am Kurs empfehlen wir folgende Vorkenntnisse:

  • Teilnehmer mit mindestens einem Jahr Erfahrung in der Verwaltung von Open-Source Data Frameworks wie Apache Spark oder Apache Hadoop

Seminardauer

  • 1 Tag
  • 09:00 Uhr bis 17:00 Uhr

Schulungsunterlagen

  • nach Absprache

Seminar-Inhalt / Agenda

Überblick über Data Analytics und die Data Pipeline

  • Einsatzmöglichkeiten der Datenanalyse
  • Verwendung der Data Pipeline für die Datenanalyse

Einführung in Amazon EMR

  • Verwendung von Amazon EMR in Analyselösungen
  • Architektur von Amazon EMR-Clustern
  • Interaktive Demo 1: Starten eines Amazon EMR-Clusters
  • Strategien zur Kostenverwaltung

Datenanalyse-Pipeline mit Amazon EMR: Ingestion und Speicherung

  • Speicheroptimierung mit Amazon EMR
  • Methoden zur Datenübernahme

High-Performance-Batch-Datenanalyse mit Apache Spark auf Amazon EMR

  • Anwendungsbereiche von Apache Spark auf Amazon EMR
  • Warum Apache Spark auf Amazon EMR
  • Spark-Konzepte
  • Transformation, Verarbeitung und Analyse
  • Verwendung von Notebooks mit Amazon EMR
  • Datenanalyse mit niedriger Latenz mit Apache Spark auf Amazon EMR

Verarbeiten und Analysieren von Batch-Daten mit Amazon EMR und Apache Hive

  • Verwendung von Amazon EMR mit Hive zur Verarbeitung von Batch-Daten
  • Transformation, Verarbeitung und Analyse
  • Batch-Datenverarbeitung mit Amazon EMR und Hive
  • Einführung in Apache HBase auf Amazon EMR

Serverlose Datenverarbeitung

  • Serverlose Datenverarbeitung, -transformation und -analytik
  • Verwendung von AWS Glue mit Amazon EMR-Workloads
  • Orchestrierung der Datenverarbeitung in Spark mit AWS Step Functions

Security und Monitoring von Amazon EMR-Clustern

  • Sichern von EMR-Clustern
  • Client-seitige Verschlüsselung mit EMRFS
  • Überwachung und Fehlerbehebung von Amazon EMR-Clustern
  • Überprüfung des Verlaufs von Apache Spark-Clustern

Entwerfen von Batch-Datenanalyselösungen

  • Anwendungsfälle für die Batch-Datenanalytik
  • Entwerfen eines Arbeitsablaufs für die Batch-Datenanalyse

Entwickeln moderner Datenarchitekturen auf AWS

  • Moderne Datenarchitekturen
Tags: AWS

Weitere Schulungen zu Thema AWS Cloud

AWS Cloud Financial Management for Builders

- u.a. in Nürnberg, Berlin, Stuttgart, München, Köln

In dieser 3-tägigen Schulung "AWS Cloud Financial Management for Builders" lernen Sie, wie Sie beim Ausführen von Arbeitslasten auf AWS Kosten verwalten, optimieren und vorhersagen können. Der Kurs richtet sich an Personen, die verstehen möchten, wie sie ...

Video Streaming Essentials for AWS Media Services

- u.a. in Nürnberg, Berlin, Stuttgart, München, Köln

In dieser 2-tägigen Schulung "Video Streaming Essentials for AWS Media Services" lernen Sie die besten Methoden für die Entwicklung und Nutzung Cloud-basierter Video-Workflows kennen. Er behandelt wichtige Konzepte im Zusammenhang mit der Videoverarbeitung und ...

AWS Security Essentials

- u.a. in Frankfurt am Main, Paderborn, Dresden, Koblenz, Virtual Classroom

In dieser 1-tägigen Schulung "AWS Security Essentials" lernen Sie die grundlegenden Sicherheitskonzepte der AWS Cloud kennen, einschließlich AWS-Zugangskontrolle, Datenverschlüsselungsmethoden und wie der Netzwerkzugang zu Ihrer AWS-Infrastruktur gesichert werden ...

AWS Cloud Practitioner Essentials

- u.a. in Hannover, Köln, Stuttgart, München, Kassel

In dieser 1-tägigen Schulung "AWS Cloud Practitioner Essentials" lernen Sie ein umfassendes Verständnis der Amazon Web Services Cloud (AWS Cloud) unabhängig von Ihrer beruflichen oder technischen Rolle anzustreben. Der Kurs bietet eine fundierte Einführung in die ...