DuckDB не читает файл Parquet, несмотря на правильный путьPython

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 DuckDB не читает файл Parquet, несмотря на правильный путь

Сообщение Anonymous »

Я пытаюсь прочитать большой файл Parquet с помощью DuckDB в блокноте Jupyter, работающем в VS Code. Моя цель — запросить подмножество данных непосредственно из файла Parquet, не загружая весь набор данных в память, поскольку моя система имеет ограниченную оперативную память. Однако DuckDB продолжает выдавать исключение IOException, несмотря на то, что путь к файлу правильный и читается с помощью pandas.
Вот базовый код, который я пытался запросить подмножество Файл паркета:

Код: Выделить всё

import duckdb

# Querying a subset of the Parquet file
query = """
SELECT *
FROM '../Data/train.parquet'
WHERE date_id 

Подробнее здесь: [url]https://stackoverflow.com/questions/79168406/duckdb-not-reading-parquet-file-despite-correct-path[/url]
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение
  • DuckDB не читает файл Parquet, несмотря на правильный путь
    Anonymous » » в форуме Python
    0 Ответы
    20 Просмотры
    Последнее сообщение Anonymous
  • DuckDB не читает файл Parquet, несмотря на правильный путь
    Anonymous » » в форуме Python
    0 Ответы
    14 Просмотры
    Последнее сообщение Anonymous
  • Чтение файлов Parquet с использованием parquet.net занимает больше времени, чем Pyarrow (Python)
    Anonymous » » в форуме Python
    0 Ответы
    9 Просмотры
    Последнее сообщение Anonymous
  • Потоковая потоковая передача Polars: Parquet Parquet на основе Shift (-1)
    Anonymous » » в форуме Python
    0 Ответы
    8 Просмотры
    Последнее сообщение Anonymous
  • Почему этот запрос DuckDB к данным s3/parquet не сохраняет информацию о профилировании EXPLAIN ANALYZE?
    Гость » » в форуме Python
    0 Ответы
    41 Просмотры
    Последнее сообщение Гость

Вернуться в «Python»