Kursplan
Avsnitt 1: Datahantering i HDFS
- Flera dataformat (JSON / Avro / Parquet)
- Komprimeringsmetoder
- Data maskering
- Laborationer : Analys av olika dataformat; aktivering av kompression
Avsnitt 2: Avancerad Pig
- Användardefinierade funktioner
- Introduktion till Pig-bibliotek (ElephantBird / Data-Fu)
- Läsa in komplexa strukturerade data med Pig
- Pig-tuning
- Laborationer : avancerad Pig-skriptning, tolkning av komplexa datatyper
Avsnitt 3: Avancerad Hive
- Användardefinierade funktioner
- Komprimerade tabeller
- Hive-prestandatuning
- Laborationer : skapa komprimerade tabeller, utvärdera tabelformater och konfiguration
Avsnitt 4: Avancerad HBase
- Avancerat schemamodellering
- Komprimering
- Massedatainsättning
- Jämförelse av breda- och långatabeller
- HBase och Pig
- HBase och Hive
- HBase-prestandatuning
- Laborationer : tuning HBase; åtkomst till HBase-data från Pig & Hive; Användning av Phoenix för datamodellering
Krav
- komfortabel med Java-programmeringsspråket (flesta programmeringsövningar är på java)
- komfortabel i Linux-miljö (ska kunna navigera i Linux-kommandoraden, redigera filer med hjälp av vi / nano)
- praktisk kunskap om Hadoop.
Labbmiljö
Inga installationer: Det finns ingen behov att installera Hadoop-programvara på studerandes datorer! En fungerande Hadoop-kluster kommer att tillhandahållas för studerande.
Studerande behöver följande
Vittnesmål (5)
The live examples
Ahmet Bolat - Accenture Industrial SS
Kurs - Python, Spark, and Hadoop for Big Data
During the exercises, James explained me every step whereever I was getting stuck in more detail. I was completely new to NIFI. He explained the actual purpose of NIFI, even the basics such as open source. He covered every concept of Nifi starting from Beginner Level to Developer Level.
Firdous Hashim Ali - MOD A BLOCK
Kurs - Apache NiFi for Administrators
That I had it in the first place.
Peter Scales - CACI Ltd
Kurs - Apache NiFi for Developers
practical things of doing, also theory was served good by Ajay
Dominik Mazur - Capgemini Polska Sp. z o.o.
Kurs - Hadoop Administration on MapR
The VM I liked very much The Teacher was very knowledgeable regarding the topic as well as other topics, he was very nice and friendly I liked the facility in Dubai.