Schulungsübersicht
Einführung in Apache Iceberg
- Überblick über Apache Iceberg
- Überblick über die grundlegenden Konzepte
Tiefes Eintauchen in die Iceberg-Architektur
- Eingehende Analyse des Tabellenformats von Iceberg
- Detaillierter Überblick über die Architektur, einschließlich Metadaten und Dateilayout
- Interna des Schemas und der Partitionsentwicklung
Fortgeschrittene Installation und Konfiguration
- Konfigurieren von Iceberg für optimale Leistung in verschiedenen Umgebungen
- Integration mit verschiedenen Datenverarbeitungssystemen
- Erweiterte Konfiguration: Sicherheit, Verschlüsselung und Zugriffskontrolle
- Einrichten von Iceberg in einer verteilten Umgebung
Fortgeschrittener Betrieb und Wartung
- Verwaltung umfangreicher Iceberg-Tabellen
- Implementierung und Verwaltung komplexer Schemaänderungen
- Handhabung von Partitionsentwicklung und versteckter Partitionierung
- Erweiterte CRUD-Operationen mit Schema- und Partitionsänderungen
Abfrageoptimierungstechniken
- Techniken zur Verringerung der Abfragelatenz
- Partitionsbeschneidung und Dateibeschneidung
- Metadaten-Caching und Optimierungsstrategien
- Implementieren und Testen von Abfrageoptimierungstechniken
Leistungstuning für große Datensätze
- Optimierung der Leistung für große Datensätze
- Verwendung der in Iceberg integrierten Funktionen für die Leistungsoptimierung
- Fallstudien zur Leistungsoptimierung in realen Szenarien
- Leistungstuning für große Datensätze
Fortgeschrittene Datenmigration und -integration
- Migrieren komplexer Datenstrukturen aus anderen Systemen
- Integration von Iceberg mit Echtzeit-Datenströmen
- Migration komplexer Datensätze und Integration von Echtzeitdatenströmen
Verlässlichkeit und Konsistenz
- Sicherstellung der Datenkonsistenz und -integrität in verteilten Umgebungen
- Implementierung und Verwaltung von Transaktionsgarantien
- Umgang mit Ausfällen und Wiederherstellungsmechanismen
- Implementierung von Zuverlässigkeits- und Konsistenzfunktionen
Erweiterte Funktionen und Anpassungen
- Benutzerdefinierte Katalogimplementierungen
- Erweiterung von Iceberg mit benutzerdefinierten Funktionen
- Implementierung von benutzerdefinierten Katalogen und Erweiterung von Iceberg-Funktionalitäten
Data Governance und Einhaltung von Richtlinien
- Implementierung von Data-Governance-Richtlinien
- Einhaltung von Datenvorschriften
- Verwaltung von Prüfpfaden und Datenverknüpfungen
- Implementierung von Governance- und Compliance-Funktionen
Zusammenfassung und nächste Schritte
Voraussetzungen
- Vertrautheit mit Kernkonzepten, grundlegenden Operationen und der Verwaltung von Iceberg-Tabellen
Zielgruppe
- Dateningenieure
- Datenarchitekten
- Datenanalysten
- Software-Entwickler
Erfahrungsberichte (3)
Der Trainer hatte ein gutes Verständnis für die Konzepte
Josheel - Verizon Connect
Kurs - Amazon Redshift
Maschinelle Übersetzung
analytische Funktionen
khusboo dassani - Tech Northwest Skillnet
Kurs - SQL Advanced
Maschinelle Übersetzung
wie der Trainer sein Wissen im Unterrichtsthema zeigt
john ernesto ii fernandez - Philippine AXA Life Insurance Corporation
Kurs - Data Vault: Building a Scalable Data Warehouse
Maschinelle Übersetzung