asyncio

A collection of 3 posts
Aiobotocore. Как переименовать 500 тысяч объектов в AWS S3
AWS S3

Aiobotocore. Как переименовать 500 тысяч объектов в AWS S3

Возникла необходимость переименовать несколько сотен тысяч объектов, хранящихся в AWS S3.  Можно нагуглить документацию и примеры на boto3, решив задачу синхронным способом. Такой скрипт работал безостановочно 4 дня, а затем остановился по моей же ошибке. Запускать скрипт снова – слишком долго, да и нет гарантии, что все файлы пройдут обработку. Работа
4 min read
Скачивание 1000 файлов. Asyncio vs Golang
asyncio Featured

Скачивание 1000 файлов. Asyncio vs Golang

В этой статье сравним скорость работы и реализацию скачивания 1000 файлов с помощью Python Asyncio и Golang. Файлы загружены на минио, запущенном локально на mac OS 2,3 GHz Intel Core i5, 8 GB 2133 MHz LPDDR3 hw.physicalcpu: 4 hw.logicalcpu: 8 Каждый файл имеет размер 6 мегабайт, а
2 min read