Mesos'ta kıvılcım sürücünün yerini nasıl belirleyecektir

Question

Bir küme modunda Meşale'de çalışan Spark var.

İşi gönderdiğimde, sürücü herhangi bir bağımlı düğümde rasgele çalışır. Sürücünün yerini belirleyebileceğim bir yol var mı? Örneğin Ben üzerinde çalıştırmak istediğiniz köle IP ..

Ben spark.driver.host

sayesinde,

Answer 1

sayılı cluster mode yılında kullanabilir miyim, yani ./bin/spark-submit komuta --deploy-mode cluster seçeneğini kullanarak, olduğunu sürücü kümedeki bir düğümde başlatıldı. Bu SparkContext tarafından ayarlandığı için ayar spark.driver.host ve/veya spark.driver.port ayarlamalısınız.