Apache Kafka Kurs i Uppsala

Confluent Apache Kafka är en företagsanpassad distribuerad plattform för händelsebaserad strömning som byggs på Apache Kafka. Den stöder högpresterande, felfrihetstoleranta dataflöden och realtidsströmningsapplikationer.Denna instruktörsledda, live-träning (online eller på plats) riktar sig till mellan-nivå ingenjörer och administratörer som vill distribuera, konfigurera och optimera Confluent Kafka-kluster i produktionsmiljöer.I slutet av denna träning kommer deltagarna att kunna:- Installera, konfigurera och driva Confluent Kafka-kluster med flera brokers.- Designa hög tillgänglighet med Zookeeper och replikeringsmetoder.- Justera prestanda, övervaka metriker och tillämpa återhämtningsstrategier.- Säkra, skalera och integrera Kafka med företagsmiljöer.Kursformat- Interaktiv föreläsning och diskussion.- Många övningar och praktik.- Händer-i-möte implementering i en live-labbmiljö.Alternativ för kursanpassning- För att begära en anpassad träning för denna kurs, kontakta oss för att boka.Module 1: Introduktion till Confluent Apache Kafka Arkitektur och Klusterkonfiguration- Vad är Apache Kafka och Confluent-plattformen?- Grundläggande om Kafka-broker, producer, konsument och ämnen- Kafkas roll i dataflödes- och meddelandepipelines- Confluent-utökningar: REST Proxy, Schema Registry, Control Center- Kafka-klusterarkitektur: brokers, partitioner och replikeringModule 2: Zookeeper Quorum Konfiguration- Vad är Zookeeper?- Zookeepers roll i ett Kafka-kluster- Zookeeper quorum storlek- Zookeeper konfiguration- Implementera SSH på våra servrar- Händer-i-möte: Zookeeper-konfiguration (som team och som tjänst)- Använda Zookeeper Command Line Interface (CLI)- Händer-i-möte: Zookeeper quorum setup- Zookeepers interna filsystem- Prestandafaktorer som påverkar Zookeeper- Demo: Zookeeper-hanteringsverktyg och ZoonavigatorModule 3: Kafka Kluster Konfiguration- Kafka grundläggande- Kafka konfiguration- Händer-i-möte: Kafka-konfiguration på en enda broker- Händer-i-möte: Utföra Kafka-kommandon- Händer-i-möte: Kafka multi-broker (kluster) setup- Händer-i-möte: Kafka-kluster testning- Kan jag ansluta till mitt Kafka-kluster?- Advertised.listeners konfiguration: nyckelinställning- Ämneskonfiguration- Konfigurera meddelandeingest och leverans i ämnen- Händer-i-möte: Demonstrera Kafkas tålighet- Kafka prestanda: I/O, nätverk, RAM, CPU, OS- Kafka prestanda: andra faktorer- Händer-i-möte: Hur man ändrar brokerkonfigurationerModule 4: Avancerad Kafka Konfiguration- Landoop Kafka Topics UI, Confluent REST Proxy, Confluent Schema Registry-konfiguration- Skicka och ta emot meddelanden (CLI, Java, Spring Framework)- Metriker och övervakningsverktyg (Confluent Control Center, Elasticsearch, etc.)- Loggfiler och offset-hantering- Hög tillgänglighet och katastrofhantering- Säkerställa hög tillgänglighet med replikering- Prestandajustering (producer/konsument)- Katastrofhanteringsstrategier- Övertagande och dataåterställning- Konfigurera anslutningar- Kafka Connect-implementering- Kafkas säkerhetsfunktionerSammanfattning och Nästa stegConfluent Apache Kafka är en företagsanpassad distribuerad plattform för händelsebaserad strömning som byggs på Apache Kafka. Den stöder högpresterande, felfrihetstoleranta dataflöden och realtidsströmningsapplikationer.Denna instruktörsledda, live-träning (online eller på plats) riktar sig till mellan-nivå ingenjörer och administratörer som vill distribuera, konfigurera och optimera Confluent Kafka-kluster i produktionsmiljöer.I slutet av denna träning kommer deltagarna att kunna:- Installera, konfigurera och driva Confluent Kafka-kluster med flera brokers.- Designa hög tillgänglighet med Zookeeper och replikeringsmetoder.- Justera prestanda, övervaka metriker och tillämpa återhämtningsstrategier.- Säkra, skalera och integrera Kafka med företagsmiljöer.Kursformat- Interaktiv föreläsning och diskussion.- Många övningar och praktik.- Händer-i-möte implementering i en live-labbmiljö.Alternativ för kursanpassning- För att begära en anpassad träning för denna kurs, kontakta oss för att boka.Erfarenhet av Linux-baserade system och kommando-radsverktyg- Kännedom om distribuerade systemkoncept- Förståelse för grundläggande nätverk och systemkonfigurationMålgrupp- DevOps- och SRE-team som hanterar Kafka-distributioner- Systemadministratörer som arbetar med Confluent och Zookeeper- Kafka-utvecklare och arkitekter ansvariga för skalbara system

Confluent Apache Kafka är en distribuerad plattform för event-strömmar som är designad för högt genomflöde, fel-toleranta data-pipelines och realtidsanalys.Denna instruktörsledda, levande utbildning (online eller på plats) riktar sig till systemadministratörer och DevOps professionella på mellanavancerad nivå som vill installera, konfigurera, övervaka och felsöka Confluent Apache Kafka kluster.I slutet av denna utbildning kommer deltagarna att kunna:- Förstå komponenterna och arkitekturen i Confluent Kafka.- Distribuera och hantera Kafka brokers, Zookeeper konsensus och viktiga tjänster.- Konfigurera avancerade funktioner, inklusive säkerhet, replikering och prestandajustering.- Använda hanteringsverktyg för att övervaka och underhålla Kafka-kluster.Kursformat- Interaktiv föreläsning och diskussion.- Många övningar och praktik.- Hands-on implementering i en levande labbmiljö.Alternativ för anpassning av kursen- För att begära en anpassad utbildning för denna kurs, vänligen kontakta oss för att arrangera.Modul 1: Introduktion till arkitekturen och konfigurationen av Confluent Apache Kafka kluster- Kafkas roll i moderna data-pipelines- Skillnader mellan Apache Kafka och Confluent Kafka- Kerna komponenter: producers, consumers, brokers, topics, partitions- Kafka kluster-distribueringsmodeller och skalningsövervägandenModul 2: Konfiguration av Zookeeper konsensus- Vad är Zookeeper?- Zookeepers roll i ett Kafka kluster- Storlek på Zookeeper konsensus- Zookeeper konfiguration- Implementering av SSH på våra servrar- Praktik: Zookeeper konfiguration (som team och som tjänst)- Användning av Zookeeper Command Line Interface (CLI)- Praktik: Konfiguration av Zookeeper konsensus- Zookeepers interna filsystem- Prestandafaktorer som påverkar Zookeeper- Demonstration av hanteringsverktyg för Zookeeper och ZoonavigatorModul 3: Konfiguration av Kafka kluster- Grundläggande Kafka begrepp- Kafka konfiguration- Praktik: Konfiguration av Kafka brokers- Praktik: Utförande av Kafka kommando- Praktik: Konfiguration av Kafka Multi-Broker kluster- Praktik: Testning av Kafka kluster- Kan jag ansluta till mitt Kafka kluster?- Konfiguration av advertised.listeners: viktigaste inställning- Konfiguration av topics- Konfiguration för nedladdning och insamling av meddelanden i topics- Praktik: Demonstrera Kafkas motståndskraft- Kafkas prestanda: I/O- Kafkas prestanda: Nätverk (RED)- Kafkas prestanda: RAM- Kafkas prestanda: CPU- Kafkas prestanda: Operativsystem (OS)- Kafkas prestanda: Övrigt- Praktik: Hur man ändrar Kafka broker konfigurationModul 4: Avancerad Kafka konfiguration- Konfiguration av Landoop Kafka topic användargränssnitt, Confluent REST Proxy, Confluent Schema Registry- Skicka och ta emot meddelanden (CLI, Java, och Spring framework)- Övervakning av metriker och verktyg (Confluent Control Center, Elasticsearch, etc.)- Loggfiler och hantering av offset- Hög tillgänglighet och katastrofåterställning- Säkerställa hög tillgänglighet genom replikering- Justering av producer och consumer prestanda- Strategier för katastrofåterställning- Kontroll av övergång och återhämtning av data- Konfiguration av connectors- Implementering av Kafka Connect- Kafkas säkerhetsfunktionerSammanfattning och nästa stegConfluent Apache Kafka är en distribuerad plattform för event-strömmar som är designad för högt genomflöde, fel-toleranta data-pipelines och realtidsanalys.Denna instruktörsledda, levande utbildning (online eller på plats) riktar sig till systemadministratörer och DevOps professionella på mellanavancerad nivå som vill installera, konfigurera, övervaka och felsöka Confluent Apache Kafka kluster.I slutet av denna utbildning kommer deltagarna att kunna:- Förstå komponenterna och arkitekturen i Confluent Kafka.- Distribuera och hantera Kafka brokers, Zookeeper konsensus och viktiga tjänster.- Konfigurera avancerade funktioner, inklusive säkerhet, replikering och prestandajustering.- Använda hanteringsverktyg för att övervaka och underhålla Kafka-kluster.Kursformat- Interaktiv föreläsning och diskussion.- Många övningar och praktik.- Hands-on implementering i en levande labbmiljö.Alternativ för anpassning av kursen- För att begära en anpassad utbildning för denna kurs, vänligen kontakta oss för att arrangera.- Bekantskap med distribuerade system och meddelandebegrepp- Erfarenhet av Linux kommando-raden- Grundläggande förståelse för nätverk och systemadministrationMålgrupp- Systemadministratörer- DevOps ingenjörer- Plattform och infrastruktur team

Denna instruktörledda, live-utbildning i Uppsala (online eller på plats) riktar sig till utvecklare på mellanliggande nivå Java som vill integrera Apache Kafka i sina applikationer för pålitlig, skalbar och högthroughput-meddelande.

I slutet av denna utbildning kommer deltagarna att kunna:

• Förstå arkitekturen och kärnkomponenterna i Kafka.
• Ställa in och konfigurera en Kafka-kluster.
• Producera och konsumera meddelanden med Java.
• Implementera Kafka Streams för realtidsdatabehandling.
• säkerställa fel tolerans och skalbarhet i Kafka-applikationer.

Denna instruktörsledda, live-utbildning i Uppsala (online eller på plats) riktar sig till systemadministratörer på mellannivå som vill utnyttja Kafkas meddelandeköfunktioner på ett effektivt sätt.

I slutet av denna utbildning kommer deltagarna att kunna:

• Förstå Kafkas funktioner och arkitektur för meddelandeköer.
• Konfigurera Kafka-ämnen för scenarier med meddelandeköer.
• Skapa och använda meddelanden med Kafka.
• Övervaka och hantera Kafka som en meddelandekö.

Denna instruktörsledda, liveutbildning i Uppsala (online eller på plats) riktar sig till systemadministratörer på nybörjarnivå till mellannivå som vill lära sig hur man effektivt hanterar Kafka-ämnen för effektiv dataströmning och bearbetning.

I slutet av denna utbildning kommer deltagarna att kunna:

• Förstå grunderna och arkitekturen för Kafka-ämnen.
• Skapa, konfigurera och hantera Kafka-ämnen.
• Övervaka Kafka-ämnen för hälsa, prestanda och tillgänglighet.
• Implementera säkerhetsåtgärder för Kafka-ämnen.

Denna instruktörsledda, liveutbildning i Uppsala (online eller på plats) riktar sig till utvecklare på medelnivå som vill lära sig grunderna i Kafka och integrera den med Spring Boot.

I slutet av denna utbildning kommer deltagarna att kunna:

• Förstå Kafka och dess arkitektur.
• Lära dig hur man installerar, konfigurerar och ställer in en grundläggande Kafka-miljö.
• Integrera Kafka med Spring Boot.

Denna instruktörsledda, liveutbildning i Uppsala (online eller på plats) riktar sig till utvecklare på medelnivå som vill utveckla big data-applikationer med Apache Kafka.

I slutet av denna utbildning kommer deltagarna att kunna:

Utveckla Kafka-producenter och konsumenter för att skicka och läsa data från Kafka. Integrera Kafka med externa system med Kafka Connect. Skriv streamingapplikationer med Kafka Streams & ksqlDB. Integrera en Kafka-klientapplikation med Confluent Cloud för molnbaserade Kafka-distributioner. Skaffa praktisk erfarenhet genom praktiska övningar och verkliga användningsfall.

Denna instruktörsledd, liveutbildning i Uppsala (online eller på plats) är riktad till utvecklare som önskar integrera Apache Kafka med befintliga databaser och applikationer för bearbetning, analys etc.

Åt slutet av denna utbildning kommer deltagarna att kunna:

• Använda Kafka Connect för att sluka stora mängder data från en databas till Kafka-ämnen.
• Sluka loggdata genererade av applikationsservrar till Kafka-ämnen.
• Göra alla insamlade data tillgängliga för strömbehandling.
• Exportera data från Kafka-ämnen till sekundära system för lagring och analys.

detta instruktör-ledda, Live Training (på plats eller fjärrkontroll) riktar sig till ingenjörer som vill använda flytande (en distribution av Kafka) för att bygga och hantera en realtid databehandling plattform för sina ansökningar.

i slutet av denna utbildning kommer deltagarna att kunna:

• Installera och konfigurera Confluent Platform.
• Använda Confluent's management tools and services för att enkelt köra Kafka.
• Lagra och bearbeta inkommande strömmande data.
• Optimera och hantera Kafka-kluster.
• Säkra dataströmmar.

format för kursen

• Interaktiv föreläsning och diskussion.
• Många övningar och praktik.
• Hands-on implementation i en live-lab-miljö.

kurs AnpassningsAlternativ

• Denna kurs är baserad på den öppna källkodsversionen av Confluent: Confluent Open Source.
• För att beställa en anpassad utbildning för denna kurs, kontakta oss för att boka.

Apache Kafka är en distribuerad streamingplattform. Det är de facto en standard för att bygga datapipelinjer och det löser många olika användningsfall kring databehandling: det kan användas som en meddelandekö, distribuerad logg, strömprocessor etc.

Vi börjar med någon teori bakom datapipelinjer i allmänhet och fortsätter sedan med grundläggande koncept bakom Kafka. Vi kommer också att upptäcka viktiga komponenter som Kafka Streams och Kafka Connect.

I denna instruktörsledda, liveutbildning i Uppsala (på plats eller på distans) kommer deltagarna att lära sig hur man ställer in och integrerar olika Stream Processing ramverk med befintliga big data-lagringssystem och relaterade mjukvaruapplikationer och mikrotjänster.

I slutet av denna utbildning kommer deltagarna att kunna:

• Installera och konfigurera olika Stream Processing ramverk, som Spark Streaming och Kafka Streaming.
• Förstå och välj det mest lämpliga ramverket för jobbet.
• Bearbeta data kontinuerligt, samtidigt och på ett rekord-för-post-sätt.
• Integrera Stream Processing lösningar med befintliga databaser, datalager, datasjöar etc.
• Integrera det mest lämpliga strömbehandlingsbiblioteket med företagsapplikationer och mikrotjänster.

Denna kurs är för företagsarkitekter, utvecklare, systemadministratörer och alla som vill förstå och använda ett distribuerat meddelandesystem med hög kapacitet. Om du har mer specifika krav (t.ex. endast systemadministrationssidan) kan denna kurs anpassas för att bättre passa dina behov.

Denna instruktörsledda, liveutbildning i Uppsala (online eller på plats) riktar sig till systemadministratörer som vill konfigurera, distribuera, hantera och optimera ett Kafka-kluster av företagsklass.

I slutet av denna utbildning kommer deltagarna att kunna:

• Konfigurera och administrera ett Kafka-kluster.
• Utvärdera fördelarna och nackdelarna med att distribuera Kafka lokalt kontra i molnet.
• Distribuera och övervaka Kafka med hjälp av olika lokala och molnmiljöverktyg.

Denna instruktörsledda, liveutbildning i Uppsala (online eller på plats) riktar sig till dataingenjörer, datavetare och programmerare som vill använda Apache Kafka funktioner i dataströmning med Python.

I slutet av denna utbildning kommer deltagarna att kunna använda Apache Kafka för att övervaka och hantera förhållanden i kontinuerliga dataströmmar med hjälp av Python programmering.

Denna instruktörsledda, liveutbildning på plats (online eller på plats) riktar sig till mjukvarutestare som vill implementera nätverkssäkerhetsåtgärder i en Apache Kafka applikation.

I slutet av denna utbildning kommer deltagarna att kunna:

• Distribuera Apache Kafka till en molnbaserad server.
• Implementera SSL-kryptering för att förhindra attacker.
• Lägga till ACL-autentisering för att spåra och kontrollera användaråtkomst.
• Se till att pålitliga klienter har åtkomst till Kafka-kluster med SSL och SASL-autentisering.

Kafka Streams är ett bibliotek på klientsidan för att bygga applikationer och mikroservices vars data skickas till och från ett Kafka-meddelandesystem. Traditionellt har Apache Kafka förlitat sig på Apache Spark eller Apache Storm att bearbeta data mellan meddelandeproducenter och konsumenter. Genom att ringa Kafka Streams API från en applikation kan data behandlas direkt inom Kafka, vilket förbigår behovet av att skicka data till ett separat kluster för bearbetning.

I denna instruktörsledda, liveträning, kommer deltagarna att lära sig att integrera Kafka Streams i en uppsättning prov Java applikationer som skickar data till och från Apache Kafka för strömbehandling.

I slutet av denna träning kommer deltagarna att kunna:

• Förstå Kafka Streams funktioner och fördelar jämfört med andra strömbehandlingsramverk
• Behandla strömdata direkt inom ett Kafka-kluster
• Skriva en Java eller Scala applikation eller mikrotjänst som integreras med Kafka och Kafka Streams
• Skriva koncist kod som omvandlar inmatnings-Kafka-ämnen till utmatnings-Kafka-ämnen
• Bygga, paketera och distribuera applikationen

Publik

• Utvecklare

Kursformat

• Delvis föreläsning, delvis diskussion, övningar och mycket praktisk övning

anteckningar

• För att begära en anpassad träning för denna kurs, vänligen kontakta oss för att ordna

Denna instruktörsledda, liveutbildning i Uppsala (online eller på plats) riktar sig till utvecklare som vill implementera Apache Kafka strömbearbetning utan att skriva kod.

I slutet av denna utbildning kommer deltagarna att kunna:

• Installera och konfigurera Confluent KSQL.
• Konfigurera en pipeline för dataströmbearbetning med endast SQL kommandon (ingen Java eller Python kodning).
• Utför datafiltrering, transformationer, aggregeringar, kopplingar, fönster och sessionisering helt i SQL.
• Utforma och distribuera interaktiva, kontinuerliga frågor för strömmande ETL och realtidsanalys.

Denna instruktörsledda, liveutbildning i Uppsala (online eller på plats) riktar sig till datavetare som vill använda SMACK-stacken för att bygga databehandlingsplattformar för big data-lösningar.

I slutet av denna utbildning kommer deltagarna att kunna:

• Implementera en datapipeline-arkitektur för bearbetning av big data.
• Utveckla en klusterinfrastruktur med Apache Mesos och Docker.
• Analysera data med Spark och Scala.
• Hantera ostrukturerad data med Apache Cassandra.

Denna instruktörsledda, liveutbildning i Uppsala (online eller på plats) riktar sig till dataingenjörer, datavetare och programmerare som vill använda Spark Streaming funktioner för att bearbeta och analysera realtidsdata.

I slutet av den här utbildningen kommer deltagarna att kunna använda Spark Streaming för att bearbeta livedataströmmar för användning i databaser, filsystem och live-instrumentpaneler.

Denna instruktörsledda, liveutbildning i Uppsala (online eller på plats) riktar sig till utvecklare som vill omvandla traditionell arkitektur till en mycket samtidig mikrotjänstbaserad arkitektur med hjälp av Spring Cloud, Kafka, Docker, Kubernetes och Redis.

I slutet av denna utbildning kommer deltagarna att kunna:

• Konfigurera den nödvändiga utvecklingsmiljön för att bygga mikrotjänster.
• Designa och implementera ett mycket samtidigt mikrotjänstekosystem med hjälp av Spring Cloud, Kafka, Redis, Docker och Kubernetes.
• Förvandla monolitiska och SOA-tjänster till mikrotjänstbaserad arkitektur.
• Anta en DevOps-metod för att utveckla, testa och släppa programvara.
• Säkerställ hög samtidighet mellan mikrotjänster i produktionen.
• Övervaka mikrotjänster och implementera återställningsstrategier.
• Utför prestandajustering.
• Lär dig om framtida trender inom mikrotjänsters arkitektur.