Есть ли способ запросить AWS Athena с помощью PySpark из Jupyter Notebook?Python

Программы на Python
Ответить
Anonymous
 Есть ли способ запросить AWS Athena с помощью PySpark из Jupyter Notebook?

Сообщение Anonymous »

Я могу без проблем выполнять запросы к базе данных SQL, за исключением Athena AWS. Кажется, нет какой-либо строки подключения, которая бы для этого работала. Я пытался использовать разъем Spark Athena, но для этого требуется клей AWS. Я хочу иметь возможность отправлять запросы к Athena AWS из Jupyter Notebook с помощью соединителя JDBC, который я скачал с Amazon AWS.

Вот пример PyAthena, который хорошо работает с Pandas, но не с PySpark. https://pypi.org/project/PyAthena/

Подробнее здесь: https://stackoverflow.com/questions/597 ... r-notebook
Ответить

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

Вернуться в «Python»