Pilnīgi! Nekad nav bijis labāks laiks, lai savam CV pievienotu Hadoop prasmes. Noskaidrosim to, izmantojot dažus faktus un piemērus.
Vai esat kādreiz domājis, kāda ir Facebook automātiskās marķēšanas funkcijas tehnoloģija? Kā būtu ar novērošanas kamerām, kas spēj radīt nevainojamus attēlus pat ar vāju apgaismojumu? Atbilde ir Hadoop un tā izcilās iespējas uzglabāt, apstrādāt un izgūt datus.
Datu glabāšana ir viena lieta, bet to apstrāde un vaicāšana ir pavisam cita bumbas spēle. Ja Big Data ir regbija komanda, tad Hadoop ir labākais aizsargs, kuru varat atrast!
Pateicoties Hadoopam, Facebook spēj saglabāt visu informāciju par personu un savā profilā norāda precīzu darbības laiku un datumu. Visa informācija par personu ir Big Data, un Hadoop palīdz to visu atveidot.
Visi Hadoop dati tiek glabāti virs HDFS (Hadoop Distributed File System), kurā var ievietot gan strukturētus, gan nestrukturētus datus. Hadoop konkurenti (piemēram, RDBMS un Excel) var uzglabāt tikai strukturētus datus. Tas ir galvenais faktors, kāpēc Hadoops ir lielais tētis, kas tradicionālajiem datu apstrādes rīkiem ļauj palaist viņu naudu. Hadoop veic apstrādi netālu no datiem, savukārt RDBMS ir nepieciešami, lai tie paši dati tiktu apstrādāti tīklā, izmantojot I / O.
Viela pārdomām: Vai Hadoops var prognozēt situācijas iznākumu, pamatojoties uz datu kopu?
labākais java ide par ubuntu
Šis grafiks parāda datu eksponenciālo pieaugumu gadu gaitā. Apskatiet to tuvāk, un pamanīsit, ka nestrukturēti dati veido 90% no visiem pasaules datiem. Vienkārši piemērojiet pieprasījuma un piedāvājuma principu, un mēs varam saprast, ka arvien vairāk nestrukturētu datu, kas peld apkārt, rodas tikai profesionāļiem, kuri šos datus var labot. Tas ir pietiekams iemesls, lai persona varētu meklēt darbu, kas nodarbojas ar nestrukturētiem datiem jeb Big Data. Nešaubieties, ka šis ir īstais laiks, lai apgūtu Hadoopu.
Cik patiesībā Hadoop ir efektīvs, salīdzinot ar RDBMS?
Hadoops izsit visus citus datu apstrādes rīkus tieši no parka. RDBMS un Excel var efektīvi pārvaldīt datus, kas nepārsniedz dažus simtus Excel lapu, bet kā ir ar tūkstoti šādu failu, kas jāuztur? Atgriezīsimies vēlreiz pie Facebook piemēra. Datu žurnālu, kurā ir informācija par Facebook lietotāja darbību, nevar saglabāt programmā Excel, vismaz ne visus lietotāja vēsturiskos datus, kas datēti ar gadu desmitiem. Arī Hadoop datus var brīvi strukturēt, bet RDBMS prasa, lai dati būtu konsekventāki un atpazīstamā formātā.
Apskatiet RDBMS un Hadoop salīdzinājumu, un jūs pats zināt, kura cena ir labāka.
kāds ir šis operators java
Man jums ir viena galīgā statistika, kas aizliedz visas šaubas par to, vai Hadoops ir labs karjeras izvēleledus.
Šis grafiks ilustrē pieaugošo pieprasījumu pēc Hadoop profesionāļiem, un tas pieaugs tikai nākamajās nedēļās.
Diemžēl mēs ar jums nevaram mainīt tehnoloģiju. Labākajā gadījumā mēs varam tam sekot līdzi un apgūt attīstošās tehnoloģijas un kļūt par neaizstājamu mūsu darba vietā. Ir īstais laiks apgūt Hadoopu un braukt ar Big Data vilni.
Vai mums ir jautājums? Lūdzu, pieminējiet to komentāru sadaļā, un mēs ar jums sazināsimies.
Saistītās ziņas:
system.exit (0) var izmantot, lai pārtrauktu programmu.