2016-04-09 33 views
0

3 düğümlü bir Hadoop kümem var. Bir mapreduce işi çalıştırıyorum - iki düğümde (isim düğümü ve veri düğümlerinden biri) haritacılar normal olarak bitiyor - ama datanode2'deki haritacılar başlıyor ama yaklaşık yarım saat sonra mola veriyorlar. Çünkü bu gerçekler garip: Diğer iki düğümlerde haritacılarıHadoop görevi tamamlanmadı - nasıl hata ayıklanır?

  1. aynı tür 1 dakika 2-
  2. her üç düğüm datanode2 üzerinde
  3. haritacılar 100'e yakın sürebilir aynı donanım kullanmak bitirmek gerekiyor CPU üzerinde%, bu yüzden aslında çalışıyorlar.

Buna neden olan herhangi bir fikir veya hata ayıklama nasıl olabilir?

cevap

0

Hadoop mimarisine göre DN-2'nin DataNode günlüklerini kontrol edebilir ve DN-2'nin CPU kullanımı, programınızın DN-2'de çalışmayacağından% 100 daha fazladır.

+0

CPU mapper tarafından kullanılıyor, öyle görünüyor – neuromouse

İlgili konular