hdfs

8ısı

3cevap

Hadoop Mapreduce Programının çıktısını program aracılığıyla okumak

Bu temel bir soru olabilir, ancak Google’da bunun için bir yanıt bulamadım. Çıkış dizininde birden çok çıktı dosyası oluşturan bir harita küçültme işim var. Java uygulamam bu işi uzak bir çalışan dizi

5ısı

1cevap

HDFS, dosyanın hala açık olduğunu, ancak işlemin yazıldığı tarihte

öldürülmüştüm hadoop için yeni durumdayım ve geçen birkaç saati bu konuyla ilgilenmeye çalıştım, ancak yardımcı olan hiçbir şey bulamadım. Benim sorunum HDFS'nin, dosyaya yazma işleminin uzun süre ölm

6ısı

5cevap

Hadoop

ile büyük boyutlu küçük dosyaların işlenmesi Hadoop örnek programı WordCount kullanarak büyük boyutlu küçük dosya/web sayfalarını (cca. 2-3 kB) işlemek için kullanıyorum. Bu, hadoop dosyaları için en

5ısı

1cevap

Bu Hadoop dosya sistemi yükleme hatasını nasıl çözebilirim?

Hadoop'u Cloudera Ubuntu olmayan bir test görüntüsüne yüklemeye çalışıyorum. Her şey ben ./bin/start-all.sh koştu kadar iyi gidiyor gibi görünüyor. İsim düğümü asla çıkmıyor, bu yüzden dosya sistemine

5ısı

2cevap

CloudStore ve HDFS

CloudStore ve HDFS ile çalışma konusunda herhangi bir yakınlık var mı. CloudStore'un ne kadar ölçeklendirildiğini ve üretimde ne kadar yoğun kullanıldığını görmek istiyorum. CloudStore, HDFS'den daha

27ısı

4cevap

HDFS dosyaları varsayılan olarak yerel olarak depolar?

Tek düğümlü küme ile varsayılan yapılandırmada hadoop çalıştırıyorum ve HDFS'nin dosyaları yerel olarak nerede sakladığını bulmak istiyorum. Herhangi bir fikrin var mı? Teşekkürler.