How to Get The Replication Factor of HDFS Files

Oleh -

 There are two ways to get the replication factor of HDFS files. 

Suppose we want to obtain the replication factor of the 2016 Olympic's Tweet dataset stored in /data/olympictweets2016rio. The first way would be to run the following command from your terminal:


which will be returning the replication factor as follows:

As shown above, the replication factor is 10. However, in most cases, the default replication factor is 3.

The other way would be simply using hadoop fs -ls command. Just make sure you state the path of the dataset from which you want to obtain the replication factor.


The above command will be returning the information of the target directory or files. Have a look at the replication factor represented by the second column right after the permission part.


Both ways return the exact replication factor, which in this case is 10.



reference: StackOverflow

Komentar

Posting Komentar

Postingan populer dari blog ini

Bandung

Oleh -
Semua orang tahu Bandung, Lebih-lebih saya yang menghabiskan waktu sekitar 17 tahun di sana. Banyak perubahan di sana-sini yang dilakukan oleh para petinggi kota untuk semakin mempercantik wajah Bandung kebanyakan perubahan tersebut saya akui berada pada poros yang benar Namun banyak perubahan-perubahan tersebut yang bersifat terlalu mercusuar dan telanjang terlalu hedonik dan metropolis sehingga seolah-olah Bandung adalah kota alternatif Jakarta yang lebih mengejutkan lagi, perubahan-perubahan tersebut memunculkan wacana untuk menyertakan Bandung masuk ke dalam proyek kota satelit Jakarta seperti halnya yang telah terjadi pada Depok, Tangerang, Bekasi, dan Bogor. Pendatang kian banyak dan berasal dari beragam ras dan agama menjadikan Bandung menjadi lebih heterogen dibanding awal tahun 2000-an sektor bisnis industri kreatif menggeliat kuat belum lagi eksploitasi media massa terhadap potensi wisata belanja dan kuliner menjadikan Bandung sebagai tujuan melepas penat men...
Baca selengkapnya

Random Sunday

Oleh -
Entah kenapa, minggu siang ini saya tidak bisa tidur seperti biasanya. Beberapa hari yang lalu, setelah membeli laybag, saya jadi malas untuk tidur-tiduran di kasur Jadilah hari ini, Minggu siang yang tenang ini, saya duduk-duduk malas di atas laybag Sambil senyum-senyum sendirian membaca histori chat saya dengan Wina. Wina, mungkin sedang istirahat juga di rumahnya. Dia terlalu lelah seharian kemarin jadi saya tak enak untuk mengganggunya siang ini. Mungkin juga sedang merasakan  quality time dengan keluarganya. Jadi, saya tahan dulu rasa kangennya, setidaknya sampai sore nanti mungkin. Dan well , kucing pemalas di depan kamar saya malah sudah lebih dulu jatuh tertidur. Jadilah saya sendirian di Minggu yang tenang ini. Ditemani godaan adik bungsu saya di ujung telepon beberapa menit lalu. Setelahnya, saya kembali tersenyum-senyum. Hahahahaa. Di tengah senyum-senyum sendiri yang random, saya menuju komputer dan mencoba melihat isi harddisk saya. saya baru sadar,...
Baca selengkapnya

A Midnight Complaint

Oleh -
I don't really care about all these 'sandwich generation' things I am suffering financially and mentally, yet I need to put my angel face in front of everyone pretending that there is no issue, pretending that life runs as usual I put everyone's expectations on my shoulder and my head every now and then Now I'm ready to explode I am no longer aware of what I do really want I have been too busy becoming a people pleaser On a night like this, with blacked eyes and a tired look in my face, I am screaming loud inside. Breaking all the silence a Thursday night could offer. I love my beloved ones but that seems not enough And I hate people laughing at something I could not afford for And I hate how people belittling anything, anything that my wallet could scream out loud I hate it But what can I do? Seems I have been trying to live by the standard beyond mine I am just tired I am sick of people laughing and smiling at things they put price tags on I just want to live as l...
Baca selengkapnya