dog bigquery.loadjobconfig () и нагрузки файлов метод Apache Beam записывает в метод BigQuery, так же < /p>
write_to_bq = (
csv_data
| "Write to BigQuery" >> WriteToBigQuery(
table= fetch_table,
schema='SCHEMA_AUTODETECT',
write_disposition=beam.io.BigQueryDisposition.WRITE_APPEND,
create_disposition=beam.io.BigQueryDisposition.CREATE_IF_NEEDED,
method=beam.io.WriteToBigQuery.Method.FILE_LOADS,
ignore_unknown_columns=True,
)
)
< /code>
и это -< /p>
job_config = bigquery.LoadJobConfig(
source_format=bigquery.SourceFormat.NEWLINE_DELIMITED_JSON,
autodetect=True,
)
Подробнее здесь: https://stackoverflow.com/questions/793 ... te-to-bigq
Do BigQuery.loadJobConfig () и File Loads Method of Apache Beam записать в метод BigQuery - это то же самое ⇐ Python
-
- Похожие темы
- Ответы
- Просмотры
- Последнее сообщение
-
-
Итерация json.loads дает мне данные, отличные от данных в json.dumps(json.loads)
Anonymous » » в форуме Python - 0 Ответы
- 98 Просмотры
-
Последнее сообщение Anonymous
-