Кто-нибудь знает, как установить имя приложения для задания SparkR? Я вообще не могу найти соответствующий api. Пример кода показывает наличие искры после загрузки библиотеки SparkR.

library(SparkR)
sparkR.session()

После этого вы можете позвонить spark.lapply(...). Как установить имя приложения с помощью переменной Spark?

0
bhomass 13 Янв 2018 в 21:42

1 ответ

Лучший ответ

Имя приложения задается аргументом appName для sparkR.session(); из документов:

sparkR.session(master = "", appName = "SparkR",
  sparkHome = Sys.getenv("SPARK_HOME"), sparkConfig = list(),
  sparkJars = "", sparkPackages = "", enableHiveSupport = TRUE, ...)
1
desertnaut 14 Янв 2018 в 10:19