Как загружать и загружать изображения в Google Cloud ⇐ Python
-
Anonymous
Как загружать и загружать изображения в Google Cloud
У меня есть миллионы URL-адресов изображений, которые мне нужно скачать и загрузить в Google Cloud Storage с помощью Python. Я попробовал это с образцом из 1500 URL-адресов изображений, и это заняло около 38 минут. Есть ли у кого-нибудь предложения по сервису, доступному на Google Cloud Platform, который поможет мне быстрее загружать и хранить изображения?
Я пробовал использовать asyncio и многопоточность
У меня есть миллионы URL-адресов изображений, которые мне нужно скачать и загрузить в Google Cloud Storage с помощью Python. Я попробовал это с образцом из 1500 URL-адресов изображений, и это заняло около 38 минут. Есть ли у кого-нибудь предложения по сервису, доступному на Google Cloud Platform, который поможет мне быстрее загружать и хранить изображения?
Я пробовал использовать asyncio и многопоточность