Неправильные даты при загрузке из s3 в RedshiftPython

Программы на Python
Ответить
Anonymous
 Неправильные даты при загрузке из s3 в Redshift

Сообщение Anonymous »

У меня есть автоматический процесс, который загружает данные из корзины s3 в формате паркета в таблицу в Redshift. И это работало нормально
Но теперь, с 2024 года, даты, загруженные в мою таблицу красного смещения, выглядят примерно так:
'2377-03-22 02:49:51:703', а раньше, когда все работало нормально, это выглядело, например, так: '2023-01-01 00:00:00.000'
Я проверил данные из моего файла паркета и даты в порядке, в формате «ГГГГ-ММ-ДД»
Код, который я использую для загрузки в redshift, представляет собой типичный copy_from_files:

Код: Выделить всё

wr.redshift.copy_from_files(
path = path,
con = connection,
use_threads = True,
table = table,
schema = schema,
mode = 'upsert',
primary_keys = pks,
iam_role = ROLE_REDSHIFT,
)
Тип в DDL из таблицы красного смещения — TIMESTAMP БЕЗ КОДИРОВАНИЯ ЧАСОВОГО ПОЯСА az64

Подробнее здесь: https://stackoverflow.com/questions/781 ... o-redshift
Ответить

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

Вернуться в «Python»