Apache Kafka Tutorial oferă conceptele de bază și avansate ale Apache Kafka. Acest tutorial este conceput atât pentru începători, cât și pentru profesioniști.
Apache Kafka este o platformă software open-source de procesare a fluxurilor, care este utilizată pentru a gestiona stocarea datelor în timp real. Funcționează ca un broker între două părți, adică un expeditor și un destinatar. Poate gestiona aproximativ trilioane de evenimente de date într-o zi.
Călătoria tutorialului Apache Kafka va acoperi toate conceptele de la arhitectură până la conceptele sale de bază.
compara cu string
Ce este Apache Kafka
Apache Kafka este o platformă software care se bazează pe un proces de streaming distribuit. Este un sistem de mesagerie de publicare-abonare care permite, de asemenea, schimbul de date între aplicații, servere și procesoare. Apache Kafka a fost dezvoltat inițial de LinkedIn , iar mai târziu a fost donat Apache Software Foundation. În prezent, este întreținut de Confluent sub Apache Software Foundation. Apache Kafka a rezolvat problema letargică a comunicării de date între un expeditor și un receptor.
Ce este un sistem de mesagerie
Un sistem de mesagerie este un simplu schimb de mesaje între două sau mai multe persoane, dispozitive etc. Un sistem de mesagerie publish-subscribe permite unui expeditor să trimită/scrie mesajul și unui destinatar să citească acel mesaj. În Apache Kafka, un expeditor este cunoscut ca a producător care publică mesaje, iar un receptor este cunoscut ca a consumator care consumă acel mesaj prin abonarea acestuia.
Ce este procesul de streaming
Un proces de streaming este procesarea datelor în sisteme conectate în paralel. Acest proces permite diferitelor aplicații să limiteze execuția paralelă a datelor, unde o înregistrare se execută fără a aștepta ieșirea înregistrării anterioare. Prin urmare, o platformă de streaming distribuită permite utilizatorului să simplifice sarcina procesului de streaming și execuția paralelă. Prin urmare, o platformă de streaming în Kafka are următoarele capacități cheie:
- Imediat ce fluxurile de înregistrări apar, le procesează.
- Funcționează similar cu un sistem de mesagerie pentru întreprinderi în care publică și abonează fluxuri de înregistrări.
- Stochează fluxurile de înregistrări într-un mod durabil tolerant la erori.
Pentru a învăța și înțelege Apache Kafka, aspiranții ar trebui să cunoască următoarele patru API-uri de bază:
anulați ultima comitere
Producer API: Acest API permite/permite unei aplicații să publice fluxuri de înregistrări pentru unul sau mai multe subiecte. (discutat în secțiunea ulterioară)
Consumer API: Acest API permite unei aplicații să se aboneze la unul sau mai multe subiecte și să proceseze fluxul de înregistrări produse pentru acestea.
API Streams: Acest API permite unei aplicații să transforme efectiv fluxurile de intrare în fluxurile de ieșire. Permite unei aplicații să acționeze ca un procesor de flux care consumă un flux de intrare de la unul sau mai multe subiecte și să producă un flux de ieșire la unul sau mai multe subiecte de ieșire.
API conector: Acest API execută API-urile reutilizabile pentru producători și consumatori cu sistemele sau aplicațiile de date existente.
De ce Apache Kafka
Apache Kafka este o platformă software care are următoarele motive care descriu cel mai bine nevoia Apache Kafka.
- Apache Kafka este capabil să gestioneze milioane de date sau mesaje pe secundă.
- Apache Kafka funcționează ca mediator între sistemul sursă și sistemul țintă. Astfel, datele sistemului sursă (producătorului) sunt trimise către Apache Kafka, unde decuplează datele, iar sistemul țintă (consumatorul) consumă datele de la Kafka.
- Apache Kafka are performanțe extrem de ridicate, adică are o valoare foarte scăzută a latenței, mai mică de 10 ms, ceea ce demonstrează că este un software bine versat.
- Apache Kafka are o arhitectură rezistentă care a rezolvat complicațiile neobișnuite în partajarea datelor.
- Organizații precum NETFLIX, UBER, Walmart etc. și peste mii de astfel de firme folosesc Apache Kafka.
- Apache Kafka este capabil să mențină toleranța la erori. Toleranța la erori înseamnă că uneori un consumator consumă cu succes mesajul care a fost livrat de producător. Dar, consumatorul nu reușește să proceseze mesajul înapoi din cauza eșecului bazei de date backend sau din cauza prezenței unei erori în codul consumatorului. Într-o astfel de situație, consumatorul nu poate consuma din nou mesajul. În consecință, Apache Kafka a rezolvat problema prin reprocesarea datelor.
- Învățarea lui Kafka este o sursă bună de venit. Deci, cei care doresc să-și crească veniturile în viitor în sectorul IT pot învăța.
Condiție prealabilă
Aspiranții ar trebui să aibă cunoștințe de bază despre programarea Java și unele cunoștințe despre comenzile Linux.
Public
Această călătorie Apache Kafka este concepută pentru începători, dezvoltatori și oameni care doresc să învețe lucruri noi.
converti șirul în data
Probleme
Vă asigurăm că nu veți găsi nicio problemă în acest tutorial Apache Kafka. Dar dacă există vreo greșeală, vă rugăm să postați problema într-un formular de contact.