Доступны ли к набору данных PyTorch несколько рабочих DataLoader?Python

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 Доступны ли к набору данных PyTorch несколько рабочих DataLoader?

Сообщение Anonymous »

При использовании более 1 рабочих процессов DataLoader в PyTorch, каждый ли рабочий процесс имеет доступ к одному и тому же экземпляру набора данных? Или у каждого работника DataLoader есть собственный экземпляр Dataset?

from torch.utils.data import DataLoader, Dataset

class NumbersDataset(Dataset):
def __init__(self):
self.samples = list(range(1, 1001))

def __len__(self):
return len(self.samples)

def __getitem__(self, idx):
return self.samples[idx]

dataset = NumbersDataset()
train_loader = DataLoader(dataset, num_workers=4)



Подробнее здесь: https://stackoverflow.com/questions/623 ... er-workers
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение

Вернуться в «Python»