Как настроить параметры прокси-сервера AWS Glue ⇐ Python

[Anonymous]

Я пытаюсь установить прокси внутри скрипта клея, чтобы подключиться к внешнему источнику — снежинке.
Но ничего из нижеперечисленного не помогло.
Подход 1: добавлен прокси в переменная env

Код: Выделить всё

os.environ['USE_PROXY'] = 'true'
os.environ['http_proxy'] = ''
os.environ['https_proxy'] = ''

Подход 2: Добавлен прокси-сервер в контексте Spark

Код: Выделить всё

spark.driver.extraJavaOptions = 

Я заметил, что IP-адрес контейнера меняется, поэтому снежинка отклоняет соединение...
Сообщение об ошибке

Код: Выделить всё

An error occurred while calling o582.load. IP  is not allowed to access Snowflake. Contact your local security administrator. 

** В этом случае нельзя использовать соединения AWS Glue из-за проблем безопасности....

Подробнее здесь: https://stackoverflow.com/questions/735 ... y-settings