Загрузка jar в интерактивный сеанс Apache Livy ⇐ JAVA

Программисты JAVA общаются здесь
Anonymous
Загрузка jar в интерактивный сеанс Apache Livy

Сообщение Anonymous »

Использование Amazon emr-5.30.1 с Livy 0.7 и Spark 2.4.5
Мы готовы использовать Apache Livy в качестве службы REST для Spark.
Мы хотим работать в режиме сеанса, а не в пакетном режиме.
Пытаемся загрузить jar в сеанс. (формальным API), используя:

Код: Выделить всё

curl -X POST \
-d '{"conf": {"kind" : "spark","jars": "s3://cjspro-emr-data/spark-examples.jar"}}' \
-H "Content-Type: application/json" localhost:8998/sessions
Просмотр журналов сеансов создает впечатление, что jar-файл не загружается.
Не говоря уже о том, что фрагменты кода, использующие запрошенный jar-файл, не работают.
Помощь?

Подробнее здесь: https://stackoverflow.com/questions/629 ... ve-session

Вернуться в «JAVA»