И
Вот простой цикл. Один фиг ломается.
Size: a a a
2020 April 16
AS
threads не подходят потому что GIL, как я понял
в случае запросов по сети гил снимается если шо
подумай насколько долго у тебя идет архивирование
если да - процессы
если нет - мб и тред пойдет
подумай насколько долго у тебя идет архивирование
если да - процессы
если нет - мб и тред пойдет
ЕП
Больше 100 entities
G
в случае запросов по сети гил снимается если шо
подумай насколько долго у тебя идет архивирование
если да - процессы
если нет - мб и тред пойдет
подумай насколько долго у тебя идет архивирование
если да - процессы
если нет - мб и тред пойдет
только юзать соответсвующие асинк executorы
ф[
в случае запросов по сети гил снимается если шо
подумай насколько долго у тебя идет архивирование
если да - процессы
если нет - мб и тред пойдет
подумай насколько долго у тебя идет архивирование
если да - процессы
если нет - мб и тред пойдет
У меня собираются данные по апи с использованием данных, которые присылаются боту. Итоговый результат весит от 200мб, затем запускается subprocess с моим .sh скриптом, который архивирует это все и заливает на ФО. Сам процесс сбора данных идёт от 10 минут до получаса
И
Больше 100 entities
Было подозрение, спасибо.
AS
только юзать соответсвующие асинк executorы
ну само собой
G
У меня собираются данные по апи с использованием данных, которые присылаются боту. Итоговый результат весит от 200мб, затем запускается subprocess с моим .sh скриптом, который архивирует это все и заливает на ФО. Сам процесс сбора данных идёт от 10 минут до получаса
ну, asyncio subprocess да, что тут ещё сказать
ф[
Нет, сабпроцес там запускается в самом конце
S
асинк в cpu bound мммм свежесть
ф[
Нет, сабпроцес там запускается в самом конце
То есть есть функция, которая начинает дамп и через 10 минут или полчаса отдает данные
G
ф[
Блин(
G
ничего не понятно, с чем проблемы? В первом вопросе ничего не было про дамп в 10 минут
ф[
было...
S
То есть есть функция, которая начинает дамп и через 10 минут или полчаса отдает данные
вообще к боту не провязывай
юзай микросервисы
юзай микросервисы
ф[
короче
G
было...
> есть бот, он должен принять текст и затем запустить процесс(функцию) с аргументом (текст), который сгенерит архив, зальет его на файлообменник и вернет ссылку и результат
потом взялся .sh скрипт, который занимается архивом, и функция, которая дампит
потом взялся .sh скрипт, который занимается архивом, и функция, которая дампит
G
процесс(функцию) - это что
