Cursuri de pregatire Building Data Pipelines with Apache Kafka

Acest curs este destinat arhitecților de întreprinderi, dezvoltatorilor, administratorilor de sistem și oricui dorește să înțeleagă și să utilizeze un sistem de mesagerie distribuit de mare capacitate. Dacă aveți cerințe mai specifice (de exemplu, doar partea de administrare a sistemului), acest curs poate fi adaptat pentru a vă adapta mai bine nevoilor.

Apache Samza este un cadru de calcul asincron, asincron, în timp real, open source Utilizează Apache Kafka pentru mesagerie și Apache Hadoop YARN pentru toleranță la erori, izolarea procesorului, securitate și gestionarea resurselor.

Acest instruire live, condus de instructor, introduce principiile din spatele sistemelor de mesagerie și procesarea fluxului distribuit, în timp ce participanții parcurg prin crearea unui proiect bazat pe Samza și execuția postului.

Până la sfârșitul acestui antrenament, participanții vor putea:

• Utilizați Samza pentru a simplifica codul necesar pentru a produce și consuma mesaje.
• Decuplați gestionarea mesajelor dintr-o aplicație.
• Utilizați Samza pentru a implementa calcule asincrone aproape în timp real.
• Utilizați procesarea fluxului pentru a oferi un nivel mai mare de abstractizare asupra sistemelor de mesagerie

Public

• Dezvoltatori

Formatul cursului

• Partea de prelegere, o discuție parțială, exerciții și practici practice

Kafka Streams este o bibliotecă din partea clientului pentru construirea de aplicații și microservicii ale căror date sunt transmise către și de la un sistem de mesagerie Kafka. În mod tradițional, Apache Kafka s-a bazat pe Apache Spark sau Apache Storm pentru a prelucra date între producătorii de mesaje și consumatori. Apelând API-ul Kafka Streams din cadrul unei aplicații, datele pot fi procesate direct în Kafka, ocolind nevoia de a trimite datele către un cluster separat pentru procesare.

În cadrul acestui training, instruit în direct, participanții vor învăța cum să integreze Kafka Streams într-un set de aplicații Java care să treacă date de la și de la Apache Kafka pentru procesarea fluxului.

Până la sfârșitul acestui antrenament, participanții vor putea:

• Înțelegeți caracteristicile și avantajele Kafka Streams față de alte cadre de procesare a fluxurilor
• Procesați fluxul de date direct în cadrul unui cluster Kafka
• Scrieți o aplicație sau microservice Java sau Scala care se integrează cu Kafka și Kafka Streams
• Scrieți un cod concis care transformă subiectele Kafka de intrare în subiecte Kafka de ieșire
• Construiți, împachetați și implementați aplicația

Public

• Dezvoltatori

Formatul cursului

• Partea de prelegere, o discuție parțială, exerciții și practici practice

notițe

• Pentru a solicita un antrenament personalizat pentru acest curs, vă rugăm să ne contactați pentru a vă organiza

În cadrul acestui curs de instruire live, condus de un instructor în România (la fața locului sau la distanță), participanții vor învăța cum să configureze și să integreze diferite cadre Stream Processing cu sistemele de stocare de date mari existente și cu aplicațiile software și microserviciile aferente.

La sfârșitul acestui curs de formare, participanții vor fi capabili să:

• Instalați și configurați diferite cadre Stream Processing, cum ar fi Spark Streaming și Kafka Streaming.
• Înțelegeți și selectați cel mai potrivit cadru pentru treaba respectivă.
.
• Procesați date în mod continuu, simultan și în mod înregistrare cu înregistrare.
.
• Integrați Stream Processing soluțiile cu bazele de date existente, depozitele de date, lacurile de date, etc.
.
• Integrați cea mai potrivită bibliotecă de procesare a fluxurilor cu aplicații de întreprindere și microservicii.

acest instructor-condus, Live Training (la fața locului sau la distanță) este destinat ingineri care doresc să utilizeze confluente (o distribuție de Kafka) pentru a construi și de a gestiona o platformă de prelucrare a datelor în timp real pentru aplicațiile lor.

până la sfârșitul acestui training, participanții vor putea:

• instala și configura platforma confluent.
• utilizarea confluente & #39; s instrumente de gestionare și servicii pentru a rula Kafka mai ușor.
• stoca și procesul de intrare flux de date.
• optimiza și gestiona clustere Kafka.
• sigure fluxuri de date.

format al cursului

• interactive prelegere și discuții.
• o mulțime de exerciții și practică.
• hands-on punerea în aplicare într-un mediu de laborator live.

curs opțiuni de personalizare

• acest curs se bazează pe versiunea Open Source de confluente: confluent deschidere acru.
• pentru a solicita un training personalizat pentru acest curs, va rugam sa ne contactati pentru a aranja.

Acest curs de instruire live, condus de un instructor în România (online sau la fața locului) se adresează dezvoltatorilor care doresc să transforme arhitectura tradițională într-o arhitectură bazată pe microservicii foarte concurente folosind Spring Cloud, Kafka, Docker, Kubernetes și Redis.

La sfârșitul acestui curs de formare, participanții vor fi capabili să:

• Setați mediul de dezvoltare necesar pentru construirea microserviciilor.
.
• Proiectați și implementați un ecosistem de microservicii foarte concurent folosind Spring Cloud, Kafka, Redis, Docker și Kubernetes.
.
• Transformați serviciile monolitice și SOA în arhitectură bazată pe microservicii.
.
• Adoptați o abordare DevOps pentru dezvoltarea, testarea și eliberarea de software.
.
• Asigurați o concurență ridicată între microservicii în producție.
.
• Monitorizați microserviciile și implementați strategii de recuperare.
.
• Realizați reglarea performanței.
.
• Învățați despre tendințele viitoare în arhitectura microserviciilor.
.

Acest curs de instruire live, condus de un instructor în România (online sau la fața locului) se adresează dezvoltatorilor care doresc să integreze Apache Kafka cu bazele de date și aplicațiile existente pentru procesare, analiză etc.

La sfârșitul acestui curs de formare, participanții vor fi capabili să:

• Utilizați Kafka Connect pentru a ingera cantități mari de date dintr-o bază de date în subiectele Kafka.
• Ingerați datele de jurnal generate de serverele unei aplicații în subiecte Kafka.
• Puneți la dispoziție orice date colectate pentru procesarea fluxurilor.
.
• Exportați datele din subiectele Kafka în sisteme secundare pentru stocare și analiză.
.

Acest curs de instruire live, condus de un instructor în România (online sau la fața locului) este destinat dezvoltatorilor care doresc să implementeze procesarea fluxurilor Apache Kafka fără a scrie cod.

La sfârșitul acestui curs de formare, participanții vor fi capabili să:

• Instalați și configurați Confluent KSQL.
.
• Configurați o conductă de procesare a fluxurilor folosind doar comenzi SQL (fără codare Java sau Python).
.
• Realizați filtrarea datelor, transformările, agregările, îmbinările, fereastrarea și sesizarea în întregime în SQL.
.
• Proiectați și implementați interogări interactive și continue pentru ETL în flux și analize în timp real.
.

Această instruire live, condusă de un instructor în România (online sau la fața locului) se adresează administratorilor de sistem care doresc să configureze, să implementeze, să gestioneze și să optimizeze un cluster Kafka de nivel enterprise.

La sfârșitul acestui curs de formare, participanții vor fi capabili să:

• Configurați și administrați un cluster Kafka.
• Evaluați beneficiile și dezavantajele implementării Kafka on-premise vs în cloud.
.
• Dezvoltați și monitorizați Kafka în folosind diverse instrumente de mediu on-premise și cloud.
.

Această instruire live, condusă de un instructor în România (online sau la fața locului) se adresează testerilor de software care doresc să implementeze măsuri de securitate a rețelei într-o aplicație Apache Kafka.

La sfârșitul acestui curs de formare, participanții vor fi capabili să:

• Desfășurați Apache Kafka pe un server bazat pe cloud.
• Implementați criptarea SSL pentru a preveni atacurile.
.
• Adaugați autentificarea ACL pentru a urmări și controla accesul utilizatorilor.
.
• Asigurați-vă că clienții credibili au acces la clusterele Kafka cu SSL și autentificare SASL.
.

Acest curs de instruire live, condus de un instructor în România (online sau la fața locului) se adresează oamenilor de știință care doresc să utilizeze stiva SMACK pentru a construi platforme de procesare a datelor pentru soluții de date mari.

La sfârșitul acestui curs de formare, participanții vor fi capabili să:

• Implementați o arhitectură de conducte de date pentru procesarea datelor mari.
• Dezvoltați o infrastructură de cluster cu Apache Mesos și Docker.
.
• Analizați datele cu Spark și Scala.
.
• Gestionați datele nestructurate cu Apache Cassandra.
.

Această instruire live, condusă de un instructor în România (online sau la fața locului) se adresează inginerilor de date, oamenilor de știință de date și programatorilor care doresc să utilizeze caracteristicile Apache Kafka în streamingul de date cu Python.

La sfârșitul acestui curs de formare, participanții vor fi capabili să utilizeze Apache Kafka pentru a monitoriza și gestiona condițiile din fluxurile de date continue folosind programarea Python.

Acest curs de instruire live, condus de un instructor în România (online sau la fața locului) se adresează inginerilor de date, oamenilor de știință de date și programatorilor care doresc să utilizeze caracteristicile Spark Streaming în procesarea și analiza datelor în timp real.

La sfârșitul acestui curs, participanții vor putea utiliza Spark Streaming pentru a procesa fluxuri de date în timp real pentru a le utiliza în baze de date, sisteme de fișiere și tablouri de bord în timp real.

Acest curs de instruire live, condus de un instructor în România (online sau la fața locului) se adresează dezvoltatorilor de nivel intermediar care doresc să dezvolte aplicații big data cu Apache Kafka.

La sfârșitul acestui curs de formare, participanții vor fi capabili să:

Dezvoltați producători și consumatori Kafka pentru a trimite și citi date din Kafka. Integrarea Kafka cu sisteme externe folosind Kafka Connect. Scrieți aplicații de streaming cu Kafka Streams & ksqlDB. Integrați o aplicație client Kafka cu Confluent Cloud pentru implementări Kafka bazate pe cloud. Dobândiți experiență practică prin exerciții practice și cazuri de utilizare din lumea reală.

Acest curs de instruire live, condus de un instructor în România (online sau la fața locului) se adresează dezvoltatorilor de nivel intermediar care doresc să învețe elementele de bază ale Kafka și să le integreze cu Spring Boot.

La sfârșitul acestui curs de formare, participanții vor fi capabili să:

Înțelegeți Kafka și arhitectura sa. Învățați cum să instalați, să configurați și să configurați un mediu Kafka de bază. Integrați Kafka cu Spring Boot.