Scala IDE'yi org.apache.spark.graphx._ paketini tanımaya nasıl ikna edersiniz?

İşimde içine GRAPHX dahil çalıştığınızda, o Scala IDE org.apache.spark.graphx._ veya grafiklere ilgili hiçbir şey tanımıyor çünkü yanlış bir şey yapıyorum gibi görünüyor (!) Ben ilk Projemi oluştururkenScala IDE'yi org.apache.spark.graphx._ paketini tanımaya nasıl ikna edersiniz?

şey mi kaçırdım ? Ek kütüphaneler eklemem gerekir mi (nasıl?)?

kaynak

2016-03-27 HoussemKhe

GraphX bağımlılığını pom dosyanıza eklemeniz gerekiyor.

<dependency> 
    <groupId>org.apache.spark</groupId> 
    <artifactId>spark-graphx_2.10</artifactId> 
    <version>1.6.1</version> 
</dependency>

kaynak

2016-03-27 05:58:37 kliew

Birkaç sorum var. Bir: Mute projemi oluşturmak için bu uzak arşiv kataloğunu bir kitaptan kullandım (https://github.com/spark-in-action/scala-archetype-sparkinaction/raw/master/archetype-catalog.xml). Scala IDE veya Spark, maven projemi düzgün bir şekilde oluşturmak için güvenle kullanabileceğim (yukarıdakilerin yerine) kendi standart kataloglarını sağlıyor mu? İki: IDE konsolundaki günlük seviyesini nasıl değiştirebilirim? Sc.setLogLevel ("ERROR") kullandım ama yine de bana INFO ve WARN gösterir! – HoussemKhe

Bağımlılıkları manuel olarak yönetmenizi öneririm. 'Kıvılcım-çekirdek' ve 'kıvılcım-grafiği' ile başlayın ve gerektiğinde ek kütüphaneler ekleyin. – kliew

Import org.apache.log4j.Logger öğelerini deneyin. import org.apache.log4j.Level; Logger.getLogger ("org"). SetLevel (Level.ERROR) ' – kliew

Artık Spark kabuğu için --packages seçeneği var. Bunu şu şekilde kullanırsınız:

spark-shell --packages [maven:coordinates:here]

kaynak

2016-03-28 16:47:31

Scala IDE'yi org.apache.spark.graphx._ paketini tanımaya nasıl ikna edersiniz?

cevap

İlgili konular