Итак, у меня есть фрейм данных Polars, содержащий около 300 тыс. строк и 7 столбцов, содержащих различные типы данных, такие как строка, целое число и дата.
Я хочу выполнить массовую вставку этих данных в таблицу Google Big Query с использованием одной команды массовой вставки с помощью SQL Alchemy.
Поскольку количество строк кажется довольно большим, есть идеи о стоимости? Даже просматривая документацию GCP, я не смог найти оценку этого конкретного варианта использования.
Я спрашиваю об этом в первую очередь потому, что однажды я выполнил задание по обработке больших данных с помощью большого запроса за одну ночь, которое закончилось. счет моей компании за облако увеличился до 40 000 долларов США за месяц, из-за чего меня чуть не уволили. Не хочу снова обжечь руки.
Подробнее здесь: https://stackoverflow.com/questions/786 ... ql-alchemy
