Python · Синтаксис · Продвинутый уровень
Асинхронный Python
Пишите конкурентные программы с `async def`, `await` и `asyncio`. Охватывает корутины, `asyncio.gather`, задачи, `asyncio.Queue` и асинхронные итераторы.
Краткое введение в тему и пояснения перед упражнениями (упражнения ниже):
Tasks, async for/with, таймаут, конкурентные HTTP-запросы
#Частые ошибки, asyncio vs потоки vs multiprocessing, справочник
#Упражнения:
Первая корутина с asyncio.run
#Напишите корутину `async def greet(name: str)`, которая выводит `'Привет, <name>!'`, ожидает 0.1 секунды через `asyncio.sleep`, затем выводит `'До свидания, <name>!'`. Запустите её через `asyncio.run(greet('Алиса'))`.
import asyncio
async def greet(name: str) -> None:
pass
asyncio.run(greet('Алиса'))
# Привет, Алиса!
# До свидания, Алиса!
Решение
import asyncio
async def greet(name: str) -> None:
print(f'Привет, {name}!')
await asyncio.sleep(0.1)
print(f'До свидания, {name}!')
asyncio.run(greet('Алиса'))
# Привет, Алиса!
# До свидания, Алиса!
Конкурентные задачи с asyncio.gather
#Напишите корутину `fetch(url: str, delay: float) -> str`, симулирующую HTTP-запрос: ждёт `delay` секунд и возвращает `f'Response from {url}'`. Используйте `asyncio.gather` для запуска трёх fetch конкурентно: `fetch('A', 0.3)`, `fetch('B', 0.1)`, `fetch('C', 0.2)`. Выведите все результаты. Общее время — около 0.3с, а не 0.6с.
import asyncio
async def fetch(url: str, delay: float) -> str:
pass
async def main() -> None:
results = await asyncio.gather(
fetch('A', 0.3),
fetch('B', 0.1),
fetch('C', 0.2),
)
for r in results:
print(r)
asyncio.run(main())
Решение
import asyncio
async def fetch(url: str, delay: float) -> str:
await asyncio.sleep(delay)
return f'Response from {url}'
async def main() -> None:
results = await asyncio.gather(
fetch('A', 0.3),
fetch('B', 0.1),
fetch('C', 0.2),
)
for r in results:
print(r)
asyncio.run(main())
# Response from A
# Response from B
# Response from C
Фоновые задачи с create_task
#Напишите корутину `main()`, создающую два фоновых задания через `asyncio.create_task`: одно считает от 3 до 1 (выводит каждое число с задержкой 0.1с), другое выводит `'Работаем...'` три раза с задержкой 0.15с. Дождитесь обоих заданий в конце. Обратите внимание, что вывод чередуется.
import asyncio
async def countdown() -> None:
for i in range(3, 0, -1):
print(f'Обратный отсчёт: {i}')
await asyncio.sleep(0.1)
async def worker() -> None:
for _ in range(3):
print('Работаем...')
await asyncio.sleep(0.15)
async def main() -> None:
# создайте задания и дождитесь их
pass
asyncio.run(main())
Решение
import asyncio
async def countdown() -> None:
for i in range(3, 0, -1):
print(f'Обратный отсчёт: {i}')
await asyncio.sleep(0.1)
async def worker() -> None:
for _ in range(3):
print('Работаем...')
await asyncio.sleep(0.15)
async def main() -> None:
task1 = asyncio.create_task(countdown())
task2 = asyncio.create_task(worker())
await task1
await task2
asyncio.run(main())
Производитель-потребитель с asyncio.Queue
#Реализуйте паттерн производитель-потребитель с `asyncio.Queue`. Корутина `producer` кладёт числа 1–5 в очередь (задержка 0.05с между числами), затем кладёт `None` как сигнал завершения. Корутина `consumer` читает элементы из очереди до появления `None`, выводя `'Consuming: <n>'` для каждого числа.
import asyncio
async def producer(queue: asyncio.Queue) -> None:
pass
async def consumer(queue: asyncio.Queue) -> None:
pass
async def main() -> None:
queue: asyncio.Queue = asyncio.Queue()
await asyncio.gather(producer(queue), consumer(queue))
asyncio.run(main())
Решение
import asyncio
async def producer(queue: asyncio.Queue) -> None:
for i in range(1, 6):
await queue.put(i)
await asyncio.sleep(0.05)
await queue.put(None) # сигнал завершения
async def consumer(queue: asyncio.Queue) -> None:
while True:
item = await queue.get()
if item is None:
break
print(f'Consuming: {item}')
async def main() -> None:
queue: asyncio.Queue = asyncio.Queue()
await asyncio.gather(producer(queue), consumer(queue))
asyncio.run(main())
Таймаут с asyncio.wait_for
#Напишите корутину `slow_op(seconds: float) -> str`, ожидающую `seconds` секунд и возвращающую `'done'`. Используйте `asyncio.wait_for(slow_op(5), timeout=0.2)` для попытки операции с таймаутом 0.2 секунды. Перехватите `asyncio.TimeoutError` и выведите `'Operation timed out!'`.
import asyncio
async def slow_op(seconds: float) -> str:
await asyncio.sleep(seconds)
return 'done'
async def main() -> None:
try:
result = await asyncio.wait_for(slow_op(5), timeout=0.2)
print(result)
except asyncio.TimeoutError:
pass # выведите сообщение здесь
asyncio.run(main())
# Operation timed out!
Решение
import asyncio
async def slow_op(seconds: float) -> str:
await asyncio.sleep(seconds)
return 'done'
async def main() -> None:
try:
result = await asyncio.wait_for(slow_op(5), timeout=0.2)
print(result)
except asyncio.TimeoutError:
print('Operation timed out!')
asyncio.run(main())
# Operation timed out!
Асинхронный генератор
#Напишите асинхронный генератор `async_range(start: int, stop: int, delay: float)`, выдающий целые числа от `start` до `stop-1`, делая паузу `delay` секунд между каждым значением. Используйте `async for` для потребления и вывода значений.
import asyncio
async def async_range(start: int, stop: int, delay: float):
pass
async def main() -> None:
async for value in async_range(0, 4, 0.05):
print(value)
asyncio.run(main())
# 0
# 1
# 2
# 3
Решение
import asyncio
async def async_range(start: int, stop: int, delay: float):
for i in range(start, stop):
yield i
await asyncio.sleep(delay)
async def main() -> None:
async for value in async_range(0, 4, 0.05):
print(value)
asyncio.run(main())
Асинхронный контекстный менеджер
#Создайте класс `AsyncTimer`, работающий как асинхронный контекстный менеджер. `__aenter__` фиксирует время начала и выводит `'Timer started'`. `__aexit__` вычисляет прошедшее время и выводит `f'Elapsed: {elapsed:.2f}s'`. Используйте с `async with AsyncTimer():`.
import asyncio
import time
class AsyncTimer:
async def __aenter__(self):
pass
async def __aexit__(self, *args):
pass
async def main() -> None:
async with AsyncTimer():
await asyncio.sleep(0.1)
asyncio.run(main())
# Timer started
# Elapsed: 0.10s
Решение
import asyncio
import time
class AsyncTimer:
async def __aenter__(self):
self._start = time.perf_counter()
print('Timer started')
return self
async def __aexit__(self, *args):
elapsed = time.perf_counter() - self._start
print(f'Elapsed: {elapsed:.2f}s')
async def main() -> None:
async with AsyncTimer():
await asyncio.sleep(0.1)
asyncio.run(main())
Ограничение конкурентности с asyncio.Semaphore
#У вас есть 8 задач, но одновременно должно выполняться не более 3. Используйте `asyncio.Semaphore(3)` для ограничения конкурентности. Каждая задача выводит `'Task N started'`, ждёт 0.1с, затем `'Task N done'`. Запустите все 8 задач через `asyncio.gather`.
import asyncio
async def task(n: int, sem: asyncio.Semaphore) -> None:
async with sem:
print(f'Task {n} started')
await asyncio.sleep(0.1)
print(f'Task {n} done')
async def main() -> None:
sem = asyncio.Semaphore(3)
# создайте и запустите 8 задач (n от 1 до 8)
pass
asyncio.run(main())
Решение
import asyncio
async def task(n: int, sem: asyncio.Semaphore) -> None:
async with sem:
print(f'Task {n} started')
await asyncio.sleep(0.1)
print(f'Task {n} done')
async def main() -> None:
sem = asyncio.Semaphore(3)
await asyncio.gather(*(task(n, sem) for n in range(1, 9)))
asyncio.run(main())
Выполнение блокирующего кода через run_in_executor
#Функция `blocking_sum(n)` вычисляет сумму 1..n через цикл (симулирует медленную работу). Оберните её в асинхронную `async_sum(n)`, используя `loop.run_in_executor(None, blocking_sum, n)`, чтобы не блокировать цикл событий. Запустите два вызова `async_sum` конкурентно через `asyncio.gather`.
import asyncio
def blocking_sum(n: int) -> int:
return sum(range(n + 1))
async def async_sum(n: int) -> int:
loop = asyncio.get_running_loop()
# запустите blocking_sum в пуле потоков
pass
async def main() -> None:
results = await asyncio.gather(async_sum(1000), async_sum(2000))
print(results) # [500500, 2001000]
asyncio.run(main())
Решение
import asyncio
def blocking_sum(n: int) -> int:
return sum(range(n + 1))
async def async_sum(n: int) -> int:
loop = asyncio.get_running_loop()
return await loop.run_in_executor(None, blocking_sum, n)
async def main() -> None:
results = await asyncio.gather(async_sum(1000), async_sum(2000))
print(results) # [500500, 2001000]
asyncio.run(main())
Координация с asyncio.Event
#Используйте `asyncio.Event` для координации двух корутин. Корутина `setter` ждёт 0.15с, выводит `'Setting event'`, затем устанавливает событие. Корутина `waiter` выводит `'Waiting for event...'`, ждёт через `await event.wait()`, затем выводит `'Event received!'`. Запустите обе через `asyncio.gather`.
import asyncio
async def setter(event: asyncio.Event) -> None:
await asyncio.sleep(0.15)
print('Setting event')
event.set()
async def waiter(event: asyncio.Event) -> None:
pass # дождитесь события, затем выведите 'Event received!'
async def main() -> None:
event = asyncio.Event()
await asyncio.gather(setter(event), waiter(event))
asyncio.run(main())
Решение
import asyncio
async def setter(event: asyncio.Event) -> None:
await asyncio.sleep(0.15)
print('Setting event')
event.set()
async def waiter(event: asyncio.Event) -> None:
print('Waiting for event...')
await event.wait()
print('Event received!')
async def main() -> None:
event = asyncio.Event()
await asyncio.gather(setter(event), waiter(event))
asyncio.run(main())