Building Data Pipelines with Apache Kafka Träningskurs

Denna kurs är för företagsarkitekter, utvecklare, systemadministratörer och alla som vill förstå och använda ett distribuerat meddelandesystem med hög kapacitet. Om du har mer specifika krav (t.ex. endast systemadministrationssidan) kan denna kurs anpassas för att bättre passa dina behov.

Apache Samza är en öppen källkod, nästan realtid, asynkron beräkningsram för strömbehandling. Den använder Apache Kafka för meddelanden och Apache Hadoop YARN för feltolerans, processorisolering, säkerhet och resurshantering.

Den här instruktörsledda, live-utbildningen introducerar principerna bakom meddelandesystem och distribuerad strömbearbetning, samtidigt som deltagarna går genom skapandet av ett exempel på Samza-baserat projekt och jobbutförande.

I slutet av denna träning kommer deltagarna att kunna:

• Använd Samza för att förenkla koden som behövs för att producera och konsumera meddelanden.
• Koppla bort hanteringen av meddelanden från en applikation.
• Använd Samza för att implementera asynkron beräkning nära realtid.
• Använd strömbehandling för att ge en högre abstraktionsnivå över meddelandesystem.

Publik

• utvecklare

Kursformat

• Delföreläsning, delvis diskussion, övningar och tung praktisk övning

Kafka Streams är ett bibliotek på klientsidan för att bygga applikationer och mikroservices vars data skickas till och från ett Kafka-meddelandesystem. Traditionellt har Apache Kafka förlitat sig på Apache Spark eller Apache Storm att bearbeta data mellan meddelandeproducenter och konsumenter. Genom att ringa Kafka Streams API från en applikation kan data behandlas direkt inom Kafka, vilket förbigår behovet av att skicka data till ett separat kluster för bearbetning.

I denna instruktörsledda, liveträning, kommer deltagarna att lära sig att integrera Kafka Streams i en uppsättning prov Java applikationer som skickar data till och från Apache Kafka för strömbehandling.

I slutet av denna träning kommer deltagarna att kunna:

• Förstå Kafka Streams funktioner och fördelar jämfört med andra strömbearbetningsramar
• Behandla strömdata direkt i ett Kafka-kluster
• Skriv en Java eller Scala applikation eller mikroservice som integreras med Kafka- och Kafka-strömmar
• Skriv kortfattad kod som omvandlar inmatade Kafka-ämnen till utgångs-Kafka-ämnen
• Bygg, paketera och distribuera applikationen

Publik

• utvecklare

Format av kursen

• Delföreläsning, delvis diskussion, övningar och tung praktisk övning

anteckningar

• För att begära en anpassad utbildning för denna kurs, vänligen kontakta oss för att ordna

I denna instruktörsledda, liveutbildning i Sverige (på plats eller på distans) kommer deltagarna att lära sig hur man ställer in och integrerar olika Stream Processing ramverk med befintliga big data-lagringssystem och relaterade mjukvaruapplikationer och mikrotjänster.

I slutet av denna utbildning kommer deltagarna att kunna:

• Installera och konfigurera olika Stream Processing ramverk, som Spark Streaming och Kafka Streaming.
• Förstå och välj det mest lämpliga ramverket för jobbet.
• Bearbeta data kontinuerligt, samtidigt och på ett rekord-för-post-sätt.
• Integrera Stream Processing lösningar med befintliga databaser, datalager, datasjöar etc.
• Integrera det mest lämpliga strömbehandlingsbiblioteket med företagsapplikationer och mikrotjänster.

detta instruktör-ledda, Live Training (på plats eller fjärrkontroll) riktar sig till ingenjörer som vill använda flytande (en distribution av Kafka) för att bygga och hantera en realtid databehandling plattform för sina ansökningar.

i slutet av denna utbildning kommer deltagarna att kunna:

• Installera och konfigurera interfluent Platform.
• använda Sam& #39; s ledning redskapen och tjänsten till springa Kafka mer lätt.
• lagra och bearbeta inkommande data.
• optimera och hantera Kafka kluster.
• säkra dataströmmar.

format för kursen

• interaktiv föreläsning och diskussion.
• massor av övningar och praktik.
• praktisk implementering i en Live-lab miljö.

kurs AnpassningsAlternativ

• den här kursen är baserad på öppen källkods-version av interfluent: flytande öppen källkod.
• att begära en skräddarsydd utbildning för denna kurs, vänligen kontakta oss för att ordna.

Denna instruktörsledda, liveutbildning i Sverige (online eller på plats) riktar sig till utvecklare som vill omvandla traditionell arkitektur till en mycket samtidig mikrotjänstbaserad arkitektur med hjälp av Spring Cloud, Kafka, Docker, Kubernetes och Redis.

I slutet av denna utbildning kommer deltagarna att kunna:

• Konfigurera den nödvändiga utvecklingsmiljön för att bygga mikrotjänster.
• Designa och implementera ett mycket samtidigt mikrotjänstekosystem med hjälp av Spring Cloud, Kafka, Redis, Docker och Kubernetes.
• Förvandla monolitiska och SOA-tjänster till mikrotjänstbaserad arkitektur.
• Anta en DevOps-metod för att utveckla, testa och släppa programvara.
• Säkerställ hög samtidighet mellan mikrotjänster i produktionen.
• Övervaka mikrotjänster och implementera återställningsstrategier.
• Utför prestandajustering.
• Lär dig om framtida trender inom mikrotjänsters arkitektur.

Denna instruktörsledda, liveutbildning i Sverige (online eller på plats) riktar sig till utvecklare som vill integrera Apache Kafka med befintliga databaser och applikationer för bearbetning, analys, etc.

I slutet av denna utbildning kommer deltagarna att kunna:

• Använd Kafka Connect för att mata in stora mängder data från en databas till Kafka-ämnen.
• Ta in loggdata som genererats av en applikationsservrar i Kafka-ämnen.
• Gör all insamlad data tillgänglig för strömbehandling.
• Exportera data från Kafka-ämnen till sekundära system för lagring och analys.

Denna instruktörsledda, liveutbildning i Sverige (online eller på plats) riktar sig till utvecklare som vill implementera Apache Kafka strömbehandling utan att skriva kod.

I slutet av denna utbildning kommer deltagarna att kunna:

• Installera och konfigurera Confluent KSQL.
• Konfigurera en pipeline för strömbehandling med endast SQL-kommandon (ingen Java- eller Python-kodning).
• Utför datafiltrering, transformationer, aggregering, sammanfogningar, fönster och sessionsisering helt och hållet i SQL.
• Designa och distribuera interaktiva, kontinuerliga frågor för streaming av ETL och realtidsanalys.

Denna instruktörsledda, liveutbildning i Sverige (online eller på plats) riktar sig till systemadministratörer som vill konfigurera, distribuera, hantera och optimera ett Kafka-kluster av företagsklass.

I slutet av denna utbildning kommer deltagarna att kunna:

• Konfigurera och administrera ett Kafka-kluster.
• Utvärdera fördelarna och nackdelarna med att distribuera Kafka lokalt kontra i molnet.
• Distribuera och övervaka Kafka med hjälp av olika lokala och molnmiljöverktyg.

Denna instruktörsledda, liveutbildning i Sverige (online eller på plats) riktar sig till programvarutestare som vill implementera nätverkssäkerhetsåtgärder i en Apache Kafka-applikation.

I slutet av denna utbildning kommer deltagarna att kunna:

• Distribuera Apache Kafka på en molnbaserad server.
• Implementera SSL-kryptering för att förhindra attacker.
• Lägg till ACL-autentisering för att spåra och kontrollera användaråtkomst.
• Se till att trovärdiga kunder har tillgång till Kafka-kluster med SSL- och SASL-autentisering.

Denna instruktörsledda, liveutbildning i Sverige (online eller på plats) riktar sig till datavetare som vill använda SMACK-stacken för att bygga databehandlingsplattformar för big data-lösningar.

I slutet av denna utbildning kommer deltagarna att kunna:

• Implementera en datapipeline-arkitektur för bearbetning av big data.
• Utveckla en klusterinfrastruktur med Apache Mesos och Docker.
• Analysera data med Spark och Scala.
• Hantera ostrukturerad data med Apache Cassandra.

Denna instruktörsledda, liveutbildning i Sverige (online eller på plats) riktar sig till dataingenjörer, datavetare och programmerare som vill använda Apache Kafka-funktioner i dataströmning med Python.

I slutet av denna utbildning kommer deltagarna att kunna använda Apache Kafka för att övervaka och hantera förhållanden i kontinuerliga dataströmmar med Python programmering.

Denna instruktörsledda, liveutbildning i Sverige (online eller på plats) riktar sig till dataingenjörer, datavetare och programmerare som vill använda Spark Streaming funktioner för att bearbeta och analysera realtidsdata.

I slutet av denna utbildning kommer deltagarna att kunna använda Spark Streaming för att bearbeta livedataströmmar för användning i databaser, filsystem och live-instrumentpaneler.

Denna instruktörsledda, liveutbildning i Sverige (online eller på plats) riktar sig till utvecklare på medelnivå som vill utveckla big data-applikationer med Apache Kafka.

I slutet av denna utbildning kommer deltagarna att kunna:

Utveckla Kafka-producenter och konsumenter för att skicka och läsa data från Kafka. Integrera Kafka med externa system med Kafka Connect. Skriv streamingapplikationer med Kafka Streams & ksqlDB. Integrera en Kafka-klientapplikation med Confluent Cloud för molnbaserade Kafka-distributioner. Skaffa praktisk erfarenhet genom praktiska övningar och verkliga användningsfall.

Denna instruktörsledda, liveutbildning i Sverige (online eller på plats) riktar sig till utvecklare på medelnivå som vill lära sig grunderna i Kafka och integrera den med Spring Boot.

I slutet av denna utbildning kommer deltagarna att kunna:

Förstå Kafka och dess arkitektur. Lär dig hur du installerar, konfigurerar och ställer in en grundläggande Kafka-miljö. Integrera Kafka med Spring Boot.