Получите таблицы из AWS Glue с помощью boto3 и создайте фрейм данных.Python

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 Получите таблицы из AWS Glue с помощью boto3 и создайте фрейм данных.

Сообщение Anonymous »

Я пытаюсь создать фрейм данных Spark на основе приведенных ниже таблиц.

Код: Выделить всё

glueclient = boto3.client('glue',region_name='xyz')

def readtable(catalog:str,database:str):

response = glueclient.get_tables(Databasename=database)

for tables in response['TableList']:

tablename=tables['Name']

par_loc=response['Table']['StorageDescriptor']['Loaction']
return spark.read.parquet(par_loc)

Появляется ошибка, поскольку проверка параметра не удалась.
Будем благодарны за любую помощь?

Подробнее здесь: https://stackoverflow.com/questions/790 ... -dataframe
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение

Вернуться в «Python»