Получите таблицы из AWS Glue с помощью boto3 и создайте фрейм данных. ⇐ Python

Программы на Python
Anonymous
Получите таблицы из AWS Glue с помощью boto3 и создайте фрейм данных.

Сообщение Anonymous »

Я пытаюсь создать фрейм данных Spark на основе приведенных ниже таблиц.

Код: Выделить всё

glueclient = boto3.client('glue',region_name='xyz')

def readtable(catalog:str,database:str):

response = glueclient.get_tables(Databasename=database)

for tables in response['TableList']:

tablename=tables['Name']

par_loc=response['Table']['StorageDescriptor']['Loaction']
return spark.read.parquet(par_loc)

Появляется ошибка, поскольку проверка параметра не удалась.
Будем благодарны за любую помощь?

Подробнее здесь: https://stackoverflow.com/questions/790 ... -dataframe

Вернуться в «Python»