BigQuery - Apache Avro Library не удалось проанализировать заголовок со следующей ошибкой: неверный файл данных. Магия н ⇐ Python

[Anonymous]

Я впервые связываюсь с файлом Avro. < /p>

Я получаю много файлов CSV с кодированными данными и просто сделал обработку Python данных, которые должны перейти в BigQuery. В конце концов я получил схему, которую я получил в AVSC с данными CSV. Все идет нормально. < /p>

Теперь я понимаю, что мне нужно создать таблицу в Бигкери, которая получит эти данные. Я просто попытался создать пустой стол и вставить полученную схему и не смог. Я получаю следующую информацию: «Ошибка при чтении данных, сообщение об ошибке: библиотека Apache Avro не смогла проанализировать заголовок со следующей ошибкой: неверный файл данных. Magic не совпадает: gs: //xxx/xxx/test.avsc». Я пытался преобразовать AVSC в JSON через эту онлайн-страницу: https://json-schema-validator.herokuapp.com/avro.jsp Как безуспешно.

Это путь процесса? Как я могу генерировать записи после декодирования, я понимаю, что схема не является неверной. Поэтому я сомневаюсь, что я поступаю правильно.

Подробнее здесь: https://stackoverflow.com/questions/590 ... lowing-err