Šiame skaitmeniniame amžiuje poreikis rinkti duomenis ir juos analizuoti realiuoju laiku tapo beveik privalomas, nes sprendimų priėmėjai pradėjo suprasti realaus laiko duomenų, atspindinčių dabartinę verslo situaciją, vertę. Tai pastebėta praktiškai visose pramonės srityse. Realaus laiko duomenys dabar yra vienas iš būdų kiekybiškai įvertinti našumą ir greitai atlikti reikalingus veiksmus. Dėl šių priežasčių realiuoju laiku atliekama analizė vis labiau populiarėja, o ateinančiais mėnesiais galime tikėtis, kad stebėsime didžiulį „Big Data“ ir „Analytics“ pokytį nuo paketinio iki beveik realaus laiko apdorojimo. „Apache“ projektai, tokie kaip „Kafka“, „Storm“ ir „Spark“, ir toliau yra populiarūs, kai reikia apdoroti srautą. Per daugelį metų inžinieriai taip pat pradėjo integruoti „Kafka“ su „Storm“ ir „Spark“. Be to, „Kafka“ įkūrėjų įkurtas naujas startuolis „Confluent“ sustiprina „Kafka“ žaidimą. Tai suteikė daugybės karjeros galimybių „Apache Kafka“ visame pasaulyje.
Prieš pereidami prie temos „mėsos“, greitai apžvelkime, kas yra Apache Kafka ir ką ji veikia.
Kas yra Apache Kafka?
„Kafka“ yra atvirojo kodo pranešimų brokerio projektas, kurį sukūrė „Apache Software Foundation“ ir kuris yra parašytas „Scala“ kalba. „Kafka“ tikslas yra sukurti vieningą, didelio našumo ir mažo vėlavimo platformą, skirtą tvarkyti duomenų srautus realiuoju laiku. „Kafka“ dizainas daugiausia grindžiamas sandorių žurnalais.
Naudojant tinkamo naudojimo atvejį, „Kafka“ turi unikalių atributų, dėl kurių tai yra labai patraukli duomenų integravimo galimybė. Tokios funkcijos kaip mastelio keitimas, duomenų skaidymas, mažas delsos laikas ir galimybė tvarkyti daugybę įvairių vartotojų leidžia puikiai naudoti su duomenų integravimu susijusius naudojimo atvejus.
Kiti „Kafka“ naudojimo būdai yra svetainės veiklos stebėjimas, veiklos metrika, žurnalų kaupimas ir srauto apdorojimas.
Apache Kafka populiarumas
„Kafka“ yra tokia populiari, kad neseniai prisijungė prie keturių kablelių klubo po to, kai per dieną pasiekė 1,1 trilijoną pranešimų (1 100 000 000 000 - keturi kableliai ... supranti?). „LinkedIn“ įdiegta „Apache Kafka“ viršijo 1,1 trilijoną ir yra pati didžiausia „Kafka“ dislokacija gamyboje bet kurioje organizacijoje.
skirtumas tarp abstrakčios klasės ir sąsajos
Kafka turėjo rimtą įtaką „LinkedIn“ gebėjimui spręsti duomenis, kurie anksčiau buvo neprieinami, bet dabar spontaniškai prieinami tvarkyti. Duomenys, pvz., Naudotojų veiklos duomenys ir žurnalo duomenys, kurių anksčiau nebuvo galima surinkti senesnėse „LinkedIn“ sistemose, dabar lengvai renkami naudojant „Kafka“. „Kafka“ vaidina svarbų vaidmenį formuojant „LinkedIn“ infrastruktūrą, taip pat ir šimtus kitų „Kafka“ priėmusių organizacijų.
„Dice“ neseniai išanalizavo internetinius darbo skelbimus ir nustatė technologinius įgūdžius, kurių paklausa išaugo. Rezultatas buvo tas, kad Kafka pateko į Top 10. Akivaizdu, kad Kafka įgūdžiai tampa gyvybiškai svarbūs.
masyvo rūšiavimas c ++ programoje
Apache Kafka karjera:
Pažvelkime į „Kafka“ darbo tendencijas pasauliniu ar tam tikru požiūriu. Nors surašymas priklauso tik JK ir JAV, tai mums suteikia labai gerą idėją apie tai, kaip sekasi Kafkai (Šaltinis: iš tikrųjų darbo tendencijos)
Iš aukščiau pateikto vaizdo matyti, kad Kafka sekėsi gana gerai. Kafka pakilo aukštyn ir turi daugiau nei dvigubai daugiau darbo vietų nei 2014 m.
Panaši tendencija pastebėta ir populiariame JAV darbo portale „Indeed“.
Apache Kafka atlyginimų tendencijos:
„Kafka“ pastaruoju metu yra madingas žodis, kai kalbama apie apdorojimą realiuoju laiku. Kadangi paklausa yra didelė, o technologijos kaip gerai veikia, atlyginimų paketas profesionalams, turintiems „Kafka“ įgūdžius, atitinka pramonės standartus.
Pasak „Iš tiesų“, „Kafka“ profesionalo vidutinis atlyginimas yra 122 000 USD per metus . Tai yra 112% didesnė nei vidutiniai kitų darbo užmokesčių atlyginimai. Atlyginimų tendencija taip pat rodo stabilų ir didėjantį augimą nuo 2015 m. Pradžios, kuris vis dar auga.
Dabar, kai nustatėme, kad Apache Kafka yra „karštas“, pažiūrėkime, kas turi turėti šį įgūdį.
Kas turėtų išmokti Apache Kafka?
„Kafka“ yra būtinas įgūdis tiems, kurie nori išmokti „Kafka“ technikos, ir yra labai rekomenduojamas šiems specialistams:
- Kūrėjai, norintys paspartinti savo „Kafka Big Data Developer“ karjerą.
- Testuojami profesionalai, kurie šiuo metu dirba eilėse ir pranešimų sistemose.
- „Big Data Architects“, kurie norėtų įtraukti „Kafka“ į savo ekosistemą.
Projektų vadovai, dalyvaujantys projektuose, susijusiuose su pranešimų sistemomis.
Išvada:
„Apache Kafka“ tapo faktiniu realiuoju laiku atliekamų duomenų analizės standartu, o „LinkedIn“ nėra vienintelė įmonė, naudojanti didžiulius duomenų srautus. Naudodamasis „Kafka“, gali būti užtikrintas, kad pasirodys „Big Data Analytics“ karjeroje.
Turite mums klausimą? Prašau paminėti juos komentarų skiltyje ir mes su jumis susisieksime.
pitono klasė __init__
Susijęs įrašas: