Асинхронность с запросами: как получить преимущество в скоростиPython

Программы на Python
Ответить
Anonymous
 Асинхронность с запросами: как получить преимущество в скорости

Сообщение Anonymous »

Я пытался использовать асинхронную синхронизацию, следуя примеру (https://pythonprogramming.net/asyncio-b ... -tutorial/), надеясь получить некоторую выгоду в скорости от нескольких запросов.get(), чем при использовании синхронизации.

Код: Выделить всё

import asyncio
import time
import requests

async def get_text(url):
print(f"Load {url}")
data = requests.get(url).text
await asyncio.sleep(0.0001)
print(f"Finished loading {url}")
return data

async def main(name):
tasks = [loop.create_task(get_text(n)) for n in name]
await asyncio.wait(tasks)
return tasks

if __name__ == '__main__':
url = ['https://www.nytimes.com', 'https://news.yahoo.com']
s = time.perf_counter()
loop = asyncio.get_event_loop()
result = loop.run_until_complete(main(url))
loop.close()
e = time.perf_counter() - s
print(f"Time takes: {e:0.2f}s")
Но, по-видимому, это то же самое, что выполнить два запроса последовательно. Можете ли вы указать, что я сделал не так и как это сделать правильно, чтобы сэкономить время? Я видел еще один пример использования ThreadPoolExecutor и цикла.run_in_executor(), но я не уверен, как его включить.

Подробнее здесь: https://stackoverflow.com/questions/610 ... ed-benefit
Ответить

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

Вернуться в «Python»