Как загрузить набор данных HuggingFace от локального пути?Python

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 Как загрузить набор данных HuggingFace от локального пути?

Сообщение Anonymous »

Возьмите простой пример на этом веб-сайте, https://huggingface.co/datasets/dahoas/ ... [code]from datasets import load_dataset
dataset = load_dataset("Dahoas/rm-static")
[/code]
Что если я хочу загрузить набор данных с локального пути, поэтому я загружаю файлы и сохраняю ту же структуру папок в веб -файлах и версиях Fristly,

Код: Выделить всё

-data
|-test-00000-of-00001-bf4c733542e35fcb.parquet
|-train-00000-of-00001-2a1df75c6bce91ab.parquet
-.gitattributes
-README.md
-dataset_infos.json
< /code>
Затем положите их в мою папку, но показывает ошибку при загрузке: < /p>
dataset_path ="/data/coco/dataset/Dahoas/rm-static"
tmp_dataset = load_dataset(dataset_path)
Показывает FilenotFoundError: NO (поддерживается) файлы данных или скрипт набора данных, найденный в /data/coco/dataset/dahoas/rm-static.

Подробнее здесь: https://stackoverflow.com/questions/770 ... local-path
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение

Вернуться в «Python»