Schulungsübersicht
Abschnitt 1: Data Management in HDFS
- Verschiedene Datenformate (JSON / Avro / Parquet)
- Komprimierungsschemata
- Datenmaskierung
- Übungen: Analysieren verschiedener Datenformate; Aktivieren der Kompression
Abschnitt 2: Fortgeschrittenes Pig
- Benutzerdefinierte Funktionen
- Einführung in Pig-Bibliotheken (ElephantBird / Data-Fu)
- Laden komplexer strukturierter Daten mit Pig
- Pig-Abstimmung
- Übungen: Fortgeschrittenes Pig Scripting, Parsen komplexer Datentypen
Abschnitt 3 : Fortgeschrittene Hive
- Benutzerdefinierte Funktionen
- Komprimierte Tabellen
- Hive Leistungsoptimierung
- Übungen : Erstellung komprimierter Tabellen, Auswertung von Tabellenformaten und Konfiguration
Abschnitt 4: HBase für Fortgeschrittene
- Fortgeschrittene Schemamodellierung
- Komprimierung
- Bulk Data Ingest
- Vergleich zwischen Wide-Table und Tall-Table
- HBase und Pig
- HBase und Hive
- HBase Leistungsoptimierung
- Übungen: Tuning von HBase; Zugriff auf HBase-Daten von Pig & Hive; Verwendung von Phoenix für die Datenmodellierung
Voraussetzungen
- Kenntnis der Programmiersprache Java (die meisten Programmierübungen werden in Java durchgeführt)
- Kenntnisse in der Linux-Umgebung (in der Lage sein, in der Linux-Befehlszeile zu navigieren, Dateien mit vi / nano zu bearbeiten)
- Kenntnisse von Hadoop .
Lab-Umgebung
Zero Install: Es ist nicht nötig, Hadoop-Software auf den Rechnern der Studierenden zu installieren! Ein funktionierender Hadoop-Cluster wird den Studierenden zur Verfügung gestellt.
Die Studierenden benötigen Folgendes
- ein SSH-Client (Linux und Mac haben bereits SSH-Clients, für Windows wird Putty empfohlen)
- einen Browser für den Zugriff auf den Cluster. Wir empfehlen Firefox Browser
Erfahrungsberichte (6)
Trainer's preparation & organization, and quality of materials provided on github.
Mateusz Rek - MicroStrategy Poland Sp. z o.o.
Kurs - Impala for Business Intelligence
I thought he did a great job of tailoring the experience to the audience. This class is mostly designed to cover data analysis with HIVE, but me and my co-worker are doing HIVE administration with no real data analytics responsibilities.
ian reif - Franchise Tax Board
Kurs - Data Analysis with Hive/HiveQL
Many hands-on sessions.
Jacek Pieczątka
Kurs - Administrator Training for Apache Hadoop
The VM I liked very much The Teacher was very knowledgeable regarding the topic as well as other topics, he was very nice and friendly I liked the facility in Dubai.
Safar Alqahtani - Elm Information Security
Kurs - Big Data Analytics in Health
The fact that all the data and software was ready to use on an already prepared VM, provided by the trainer in external disks.
vyzVoice
Kurs - Hadoop for Developers and Administrators
practical things of doing, also theory was served good by Ajay