BigQuery — библиотеке Apache Avro не удалось проанализировать заголовок со следующей ошибкой: Неверный файл данных. Маги ⇐ Python

[Anonymous]

Я впервые возился с файлом avro.

Я получаю много CSV-файлов с закодированными данными и только что обработал Python данные, которые должны поступить в BigQuery. В конце концов я получил схему, которую получил в avsc с данными csv. Все идет нормально.

Теперь я понимаю, что мне нужно создать в BigQuery таблицу, которая будет получать эти данные. Я просто попытался создать пустую таблицу и вставить полученную схему и не смог. Я получаю следующую информацию: «Ошибка при чтении данных, сообщение об ошибке: библиотеке Apache Avro не удалось проанализировать заголовок со следующей ошибкой: неверный файл данных. Магия не соответствует: gs://xxx/xxx/test.avsc» . Я пытался преобразовать avsc в json через эту онлайн-страницу: https://json-schema-validator.herokuapp.com/avro.jsp, но безуспешно.

Это путь процесса? Поскольку я могу генерировать записи после декодирования, я понимаю, что схема не является неправильной. Поэтому я сомневаюсь, правильно ли я поступаю.

Подробнее здесь: https://stackoverflow.com/questions/590 ... lowing-err