2016-04-14 15 views
0

Kurulum scala'm var, Hadoop & kıvılcım & ana düğümü başarıyla başlattı. Ben sadece & kıvılcım kuruluyor & çalışan (köle) de başladı. Öyleyse şaşkın olduğum şey, Haddop'un çalışanlar için de görevlerini yerine getirmemesi gerektiğidir. Resmi Apache Spark, bir kıvılcım kümelenmesinin nasıl yapılandırılacağını gösterir.İşçinin Spark için Hadoop'a da ihtiyacı var mı?

+1

Aslında birisi sorunuzu yanıtlıyor. Cevabı kabul etmiyorsunuz ve sorunuzu tamamen değiştiriyorsunuz. Yeni bir sorunuz varsa, lütfen yeni bir soru olarak gönderin ve soru başlığını ve ayrıntılarını değiştirmeyin. – eliasah

+0

Üzgünüm, çoğaltmayı önlemek için düzenledim, fakat cevabın ikinci kısmı, kıvılcım gerektiren kıvılcım oluşturmakla ilgili. Ama benim her iki sorum da Hadoop'un hem usta hem de işçi için gerekli olup olmadığıydı. Daha sonra çalışanı Hadoop olmadan çalıştırabildim. Bu karışıklığa neden oldu ve ben de soruyu düzenledim. – user2700022

cevap

0

Ve gereksinimler açıkça hem scala hem de hadoop'un gerekli olduğu here açıklanmıştır.

+0

Sağladığınız ikinci bağlantı, kıvılcım oluşturma niyetinde değil. Kıvılcımın ustaca uyarlanmış sürümünü kullandım. Sadece scala ve kıvılcımı yükledim ve başarılı çalışan bir çalışanı denedim. – user2700022

İlgili konular