Отправятся ли все тысячи асинхронных запросов в Python

При использовании asyncio и aiohttp можно эффективно отправлять тысячи асинхронных запросов, но важно учитывать лимиты системы (например, открытых файлов/сокетов). Рекомендуется использовать семафор для ограничения одновременных запросов:

import aiohttp
import asyncio

async def fetch(url, session, semaphore):
async with semaphore:
async with session.get(url) as response:
return await response.text()

async def main():
semaphore = asyncio.Semaphore(100) # Ограничение на 100 одновременных запросов
async with aiohttp.ClientSession() as session:
tasks = [fetch(url, session, semaphore) for url in urls]
await asyncio.gather(*tasks)

urls = ["http://example.com"] * 1000
asyncio.run(main())

Ключевые моменты:
1. Без семафора система может исчерпать ресурсы
2. `asyncio.gather` запускает все корутины, но выполнение будет ограничено семафором
3. Для больших объемов лучше использовать очередь задач