V tomto digitálnom veku sa potreba zhromažďovania údajov a ich analýza v reálnom čase stala takmer povinnou, pretože subjekty s rozhodovacími právomocami začali chápať hodnotu údajov v reálnom čase, ktorá odráža súčasnú situáciu v podnikaní. Toto bolo zaznamenané prakticky v každej priemyselnej doméne. Údaje v reálnom čase sú teraz jedným zo spôsobov, ako kvantifikovať výkon a rýchlo podniknúť potrebné kroky. Z týchto dôvodov si analytika v reálnom čase získava na popularite a v nadchádzajúcich mesiacoch môžeme očakávať obrovský posun v oblasti Big Data a Analytics, od hromadného spracovania takmer v reálnom čase. Projekty Apache ako Kafka, Storm a Spark sú aj naďalej populárne, čo sa týka spracovania streamov. V priebehu rokov začali Engineers tiež integrovať Kafku s Storm and Spark. Ďalej Confluent, nový startup založený zakladateľmi Kafky, zvyšuje hru Kafka. To spôsobilo v Apache Kafka množstvo kariérnych príležitostí po celom svete.
čo robí system.exit (0) v jave
Skôr ako sa pustíme do „mäsa“ tejto témy, pozrime sa rýchlo na to, o čom je Apache Kafka a čo robí.
Čo je Apache Kafka?
Kafka je projekt sprostredkovateľa správ s otvoreným zdrojom, ktorý vyvinula Apache Software Foundation a je napísaný v jazyku Scala. Cieľom spoločnosti Kafka je poskytnúť jednotnú vysokovýkonnú platformu s nízkou latenciou na spracovanie informačných kanálov v reálnom čase. Dizajn spoločnosti Kafka je založený predovšetkým na protokoloch transakcií.
Pri použití pre správny prípad použitia má Kafka jedinečné atribúty, vďaka ktorým je veľmi atraktívnou voľbou pre integráciu údajov. Vďaka vlastnostiam, ako je škálovateľnosť, rozdelenie údajov, nízka latencia a schopnosť zvládnuť veľké množstvo rôznych spotrebiteľov, sa dobre hodí pre prípady použitia súvisiace s integráciou údajov.
Ďalším využitím Kafky je sledovanie aktivity na webe, operačné metriky, agregácia protokolov a spracovanie streamu.
Popularita Apache Kafky
Kafka je taká populárna, že sa nedávno stala členom klubu štyroch čiarok po tom, čo dosiahla 1,1 bilióna správ denne (1 100 000 000 000 - štyri čiarky ... chápete?). Nasadenie Apache Kafky spoločnosťou LinkedIn prekonalo 1,1 bilióna a je zďaleka najväčším nasadením Kafky vo výrobe v akejkoľvek organizácii.
Kafka mala vážny dopad na schopnosť LinkedIn narábať s údajmi, ktoré boli predtým neprístupné, ale teraz sú spontánne dostupné na spracovanie. Údaje, ako sú údaje o činnosti používateľov a údaje z denníkov, ktoré sa predtým v starších systémoch LinkedIn nedali zhromaždiť, sa teraz dajú ľahko zhromaždiť pomocou Kafky. Kafka hrá rozhodujúcu úlohu pri formovaní infraštruktúry LinkedIn, ako aj pre stovky ďalších organizácií, ktoré Kafku prijali.
Kocky nedávno analyzovali svoje online ponuky práce a identifikovali technické zručnosti, ktoré prudko vzrástli z hľadiska dopytu. Výsledkom bolo, že Kafka sa dostal do Top 10. Je zrejmé, že zručnosť Kafky sa stáva životne dôležitou.
Kariéra spoločnosti Apache Kafka:
Pozrime sa na pracovný trend pre Kafku z globálneho alebo trochu globálneho hľadiska. Aj keď sčítanie patrí iba Veľkej Británii a USA, dáva nám veľmi dobrú predstavu o tom, ako sa Kafkovi darí (Zdroj: Indends Job Trends)
Z vyššie uvedeného obrázku je zrejmé, že Kafkovi sa darilo celkom dobre. Kafka sa posunul vyššie a má viac ako dvojnásobný počet pracovných miest ako v roku 2014.
Podobný trend bol zaznamenaný aj na populárnom pracovnom portáli so sídlom v USA.
Trendy platov Apache Kafka:
Kafka je v poslednom čase módnym slovom, pokiaľ ide o spracovanie v reálnom čase. Pretože dopyt je vysoký a technológia ako taká sa dobre darí, platový balíček pre profesionálov so znalosťou Kafka je na úrovni priemyselných štandardov.
čo robí math.abs v jave
Podľa spoločnosti Indeed priemerný plat pre profesionála Kafku je 122 000 USD ročne . To je o 112% viac ako priemerné platy iných pracovných miest. Vývoj platov tiež naznačuje stabilný a približujúci sa rast od začiatku roka 2015, ktorý stále rastie.
php previesť objekt na pole
Teraz, keď sme zistili, že Apache Kafka je „horúci“, pozrime sa, kto musí mať túto zručnosť.
Kto by sa mal naučiť Apache Kafku?
Kafka je nevyhnutnou zručnosťou pre tých, ktorí sa chcú naučiť techniky Kafky, a je vysoko odporúčaná pre nasledujúcich profesionálov:
- Vývojári, ktorí chcú urýchliť svoju kariéru „vývojára veľkých dát Kafka“.
- Testovanie profesionálov, ktorí v súčasnosti pracujú na systémoch zaradenia do frontu a správ.
- Big Data Architects, ktorí by chceli zahrnúť Kafku do svojho ekosystému.
Projektoví manažéri zapojení do projektov týkajúcich sa systémov zasielania správ.
Záver:
Apache Kafka sa stal de facto štandardom pre analýzu dát v reálnom čase a LinkedIn nie je jedinou spoločnosťou, ktorá využíva obrovské prúdy dát. Vďaka spoločnosti Kafka je možné zaručiť, že vynikne v kariére Big Data Analytics.
Máte na nás otázku? Uveďte ich prosím v sekcii komentárov a my sa vám ozveme.
Súvisiaci príspevok: