Мы готовы использовать Apache Livy в качестве службы REST для Spark.
Мы хотим работать в режиме сеанса, а не в пакетном режиме.
Пытаемся загрузить jar в сеанс. (формальным API), используя:
Код: Выделить всё
curl -X POST \
-d '{"conf": {"kind" : "spark","jars": "s3://cjspro-emr-data/spark-examples.jar"}}' \
-H "Content-Type: application/json" localhost:8998/sessions
Не говоря уже о том, что фрагменты кода, использующие запрошенный jar-файл, не работают.
Помощь?
Подробнее здесь: https://stackoverflow.com/questions/629 ... ve-session