Cloudera Kurulumu

“Big dataya nereden başlamalı?” sorusuna; “Cloudera kurarak başlamalı” cevabını verenleri buraya doğru alalım. 🙂

1.Adım:

Bilgisayarınızda VirtualBox kurulu olduğunu varsayarak aşağıdaki gibi Cloudera sayfasından CDH 5.12’yi (yada en güncel sürümünü)  platform olarak VirtualBox seçerek indiriyoruz. (VMWare, Docker Image ve KVM seçenekleri de mevcut.)

https://www.cloudera.com/downloads/quickstart_vms/5-12.html

2.Adım:

VBox’ta New diyip açılan ekrandaki alanları dolduruyoruz. (Ekranın solunda daha önce oluşturduğum vm görünüyor. 🙂 )

3.Adım:

Memory Size olarak önerilen min. değer 8 GB olduğu için 8192 MB olarak seçiyorum. Çünkü Cloudera CDH, içeriğinde birçok uygulama barındıran bir platform ve bunlar bellek konusunda güçlü bir tüketime neden olmakta. (CentOS, Hadoop, Spark … )

4.Adım:

‘Use an existing virtual hard disk file’ ‘ı seçip browse kısmından .vmdk uzantılı dosyanın yolunu gösterip open diyoruz. İlk ekrana dönüp create diyoruz.

Ve Kurulum tamamlandı.

5.Adım (Optional):

Settings kısmından Shared Clipboard: Bidirectional | Drag’n’Drop:Host To Guest  şeklinde düzenleriz.

6.Adım:

Settings kısmından işlemci çekirdek sayısını 4 olarak atıyoruz.

7.Adım:

Artık kurulumunu tamamladığımıza göre cloudera vm’ini start diyip başlatabiliriz.

Veee…

---

Kurulum adımlarının ardından kurulan CentOS’ta Web Browser’a girince CDH ile yüklediğimiz uygulamalara erişim için ilgili bookmarklerin yerli yerinde bizi beklediğini görmekteyiz.

Peki hangi hadoop versiyonunu kullanıyoruz:

Görüldüğü gibi kurulumu sağlamak oldukça basit bir işlem. Bir sonraki adım içerideki uygulamaları kullanmak. Görüşmek üzere.

 

---

Ali Mesut Karadeniz