Razmišljao sam dugo o temi za ovaj post. Kao što ste i sami primetili, dugo nisam napisao nijedan tekst. Razlog nije što sam zaboravio ili što više ne želim da pišem, već sam radio kako bi blog obogatio novim tekstovima. Poslednjih nekoliko nedelja pratim jedan odličan kurs o Apache Storm-u, kome ću posvetiti sledeći tekst na […]
Posle niza tekstova koji su se više odnosili na alate koji se dodaju na Hadoop, rešio sam da se vratim na trenutak na jednu od najbitnijih Hadoop komponenti – HDFS. U celoj Hadoop “priči” potrebno je podjednako znati i Hadoop osnovne alate i alate iz ekosistema, ali razlog zbog koga se u ovom tekstu fokusiram […]
Pre nego što počnem da pišem, moram da se pohvalim. Razlog za to je nova kategorija na blogu – Big Data u organizaciji. Tekstove će pisati Jelena, pa bih iskoristio priliku da poželim dobrodošlicu. Nadam se da će podeliti dosta iskustava sa nama i da će vam njeni tekstovi biti zanimljivi i korisni. Ukoliko neko […]
Posle malo duže pauze nastavljamo sa novim tekstovima. Izvinjavam se zbog nepisanja, ali to je zbog nedostatka vremena, koje je delom utrošeno i na poboljšanje ovog bloga. Naime, u narednom periodu možete očekivati neke novitete, za koje se nadam da mogu da poboljšaju Big Data scenu u našem regionu. Ovaj tekst će biti posvećen tome […]
Pre početka instalacije Hadoop-a isplaniraćete ceo sistem ili možda imate neki test Hadoop sistem. U svakom slučaju, prvo morate da se zapitate koje podatke treba obraditi vaš sistem. Kako je Hadoop jako fleksibilan što se tiče raznolikosti podataka, sledeće na šta treba da obratite pažnju je kako te podatke da prebacite u HDFS. Brzina podataka […]
Nakon teksta o primeni Hadoop-a došlo je na red da probam da opišem kakva je podela poslova vezanih za Hadoop i njegov ekosistem. Big Data je široka oblast, takođe i Hadoop. Možda je pre nekoliko godina bilo moguće reći “Bavim se Hadoop-om.” i da to znači da je cela oblast pokrivena. Sa konstantnim unapređenjem Hadoop-a […]
Gotovo svi prethodni tekstovi su bili o tome šta je Hadoop, kako radi i bilo je dosta reči o drugim alatima iz ekosistema. Ovaj tekst je posvećen primeni Hadoop-a u praksi, odnosno osvrnuću se na to gde možete da koristite ili ne koristite Hadoop i ostale alate. Oblasti primene Hadoop-a. Što se tiče primene Hadoop-a, […]
Često se pominje, kada je Hadoop u pitanju, da su dve najbitnije komponente HDFS i MapReduce. Čuo sam to od mnogih sa kojima sam pričao. Obično se zapostavljaju druge dve komponente – Hadoop Common, o kojoj sam pisao u ranijim tekstovima, i YARN. Lično nisam usmeravao previše pažnje na ove komponente, ali u radu sa […]
U prošlom tekstu sam pisao o HDFS i njegovom značaju za Hadoop. Kada bismo imali samo Hadoop sa HDFS-om i Common paketom, to bi bila samo platforma za skladištenje velike količine podataka. Postavlja se pitanje zašto samo skladištiti podatke, to je glupo, a i skupo. Zato Hadoop ima posebnu komponentu koja će obradovati programere, MapReduce. […]
Šta je HDFS? Odgovor na ovo pitanje je jako jednostavan, HDFS je Hadoop distribuirani fajl sistem i sastavni je deo Hadoop-a. Dizajniran je tako da može da radi na bilo kojoj hardverskoj strukturi. U principu nema nekog smisla da ga instalirate na laptopu ili desktop računaru, jer se prava moć vidi na serverima. Moja prva […]