Я получаю исключение dtype
pyo3_runtime.PanicException: Arrow datatype Map(Field { name: "key_value", dtype: LargeList(Field { name: "key_value", dtype: Struct([Field { name: "key", dtype: Utf8View, is_nullable: false, метаданные: None }, Field { имя: «значение», dtype: Int64, is_nullable: true, метаданные: нет }]), is_nullable: true, метаданные: нет }), is_nullable: true, метаданные: нет }, false) не поддерживается Polars. Вероятно, вам нужно активировать эту функцию типа данных.
Я могу прочитать ее, если задаю use_pyarrow=True, но мне нужно использовать отложенный режим.
У меня много файлов, поэтому мой обходной путь заключался в том, чтобы прочитать каждый файл в активном режиме с помощью механизма pyarrow и сохранить его снова. Я пытался использовать набор данных pyarrow и scan_pyarrow_dataset, но безуспешно.
Подробнее здесь: https://stackoverflow.com/questions/794 ... yarrow-can
