T
Size: a a a
2021 February 25
T
а дальше меня яндекс забанил =D
T
или не яндекс, а что-то с сетью
T
хммм
СС
а дальше меня яндекс забанил =D
а я думал писать тебе или нет про публичные ресурсы))
СС
ванговал какой ты выберешь, гугл или яндекс. ставил на гугл. не угадал
АК
"за раз" это как?
ну накидал N запросов, ждет пока ответ придет, ответ вернулся, отправил еще запрос, и так N процессов загружено в параллели, ожидает ответов, разве не так? поправьте пожалуйста если что
АК
О, любопытно, а у вас несколько другие либы используются.
СС
докинул еще вот такие варианты
```
```
```
@timeit
def with_async_pool(w):
pool = ThreadPool(processes=8)
pool.map_async(w, range(count))
pool.close()
pool.join()
@timeit
def with_async_wrap_sync_requests():
loop = asyncio.get_event_loop()
session = requests.Session()
async def async_get():
return session.get(url)
async_tasks = [loop.create_task(async_get()) for _ in range(count)]
return loop.run_until_complete(asyncio.gather(*async_tasks))```
СС
io
with_threads
11.086925983428955
with_processes
7.0769593715667725
synchronously
24.03195571899414
with_async_pool
3.705857276916504
8.745435953140259
with_threads
11.086925983428955
with_processes
7.0769593715667725
synchronously
24.03195571899414
with_async_pool
3.705857276916504
with_async_wrap_sync_requests8.745435953140259
T
Эээ. Что тут происходит с асинкио
СС
осталось только aiohttp но мне лень
СС
Эээ. Что тут происходит с асинкио
враппер асинхронный, реквесты синхронно
T
Меня сильно смущает что оно отличается по времени от последовательного варианта
T
А ну блин, ты сессию создал
T
ускорение не за счет аиснкио, а за счет использвания сессии
T
по сути тут асинкио выполняет роль цикла for
АК
ускорение не за счет аиснкио, а за счет использвания сессии
мне показалось или без сессии быстрее банят?)
T
раз на раз не приходится
T
сессия - это переиспользование tcp коннектов, то есть мы экономим на установке соединения. Это актуально когда запрос выполняется на сервере быстро и мало данных