В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Ваdоо PHP Мееtuр

558 membersпожаловаться на группу
2020 December 13

BD

Bogdan Diadenko in Ваdоо PHP Мееtuр
Возможно мой вопрос переключит внимание с ревербераторов))

А поделитесь способами выполнения long-term scripts/runtime(20-30) min. Естественно основной бэк написан на php и должна быть поддержка запуска как с web клиента так и через CLI. Shell_exec не предлагать)
источник
19:09пожаловаться#1

SK

Sergey Kiryakov in Ваdоо PHP Мееtuр
Bogdan Diadenko
Возможно мой вопрос переключит внимание с ревербераторов))

А поделитесь способами выполнения long-term scripts/runtime(20-30) min. Естественно основной бэк написан на php и должна быть поддержка запуска как с web клиента так и через CLI. Shell_exec не предлагать)
ну тут вариантов не много. по крону у вас скрипт может работать хоть вечность, а через веб, не совсем понимаю зачем вам
источник
19:12пожаловаться#2

PT

Pavel Tolstikov in Ваdоо PHP Мееtuр
shell_exec то чем плох? Естественно не прямую его дёргать из веба, а складывать в очередь и какой-нибудь демон будет разгребать и в нужное число потоков запускать, следить за результатом.
источник
19:13пожаловаться#3

SK

Sergey Kiryakov in Ваdоо PHP Мееtuр
Pavel Tolstikov
shell_exec то чем плох? Естественно не прямую его дёргать из веба, а складывать в очередь и какой-нибудь демон будет разгребать и в нужное число потоков запускать, следить за результатом.
+1 не успел дописать)
источник
19:13пожаловаться#4

PT

Pavel Tolstikov in Ваdоо PHP Мееtuр
Демона вполне можно тоже на php написать, хотя есть более подходящие языки.
источник
19:13пожаловаться#5

BD

Bogdan Diadenko in Ваdоо PHP Мееtuр
Sergey Kiryakov
ну тут вариантов не много. по крону у вас скрипт может работать хоть вечность, а через веб, не совсем понимаю зачем вам
Если нужно обработать 500к строк с csv и загружают его через ui интерфейс, то крайне неразумно будет удерживать клиент, которой по дефолту через 30с сам отпадет.
источник
19:15пожаловаться#6

SK

Sergey Kiryakov in Ваdоо PHP Мееtuр
Bogdan Diadenko
Если нужно обработать 500к строк с csv и загружают его через ui интерфейс, то крайне неразумно будет удерживать клиент, которой по дефолту через 30с сам отпадет.
пишете демона, ставите задачу. Делаете менеджера задач.
источник
19:16пожаловаться#7

YV

Yushkevich Vitaly in Ваdоо PHP Мееtuр
Bogdan Diadenko
Возможно мой вопрос переключит внимание с ревербераторов))

А поделитесь способами выполнения long-term scripts/runtime(20-30) min. Естественно основной бэк написан на php и должна быть поддержка запуска как с web клиента так и через CLI. Shell_exec не предлагать)
Мне кажется, тут вопрос немного по другому надо сформулировать.

Ограничение времени выполнения легко крутится настройками и не должно быть проблемой.

Скорее вопрос, как эффективнее работать с этим.

Выше предложили отличный вариант через демонов с лимитом времени выполнения и памяти, чтобы минимизировать утечки. Ну и контролировать результат.
источник
19:16пожаловаться#8

YV

Yushkevich Vitaly in Ваdоо PHP Мееtuр
Bogdan Diadenko
Если нужно обработать 500к строк с csv и загружают его через ui интерфейс, то крайне неразумно будет удерживать клиент, которой по дефолту через 30с сам отпадет.
Такой файл отлично пилится на несколько потоков и обрабатывается разными вариантами, например демонами уже. А на фронт возвращать результат через пуш
источник
19:18пожаловаться#9

SK

Sergey Kiryakov in Ваdоо PHP Мееtuр
Yushkevich Vitaly
Такой файл отлично пилится на несколько потоков и обрабатывается разными вариантами, например демонами уже. А на фронт возвращать результат через пуш
а на фронт нужно возвращать результат ли?
источник
19:18пожаловаться#10

SK

Sergey Kiryakov in Ваdоо PHP Мееtuр
Yushkevich Vitaly
Такой файл отлично пилится на несколько потоков и обрабатывается разными вариантами, например демонами уже. А на фронт возвращать результат через пуш
Пуш, на сколько я понимаю, предполагает наличие сокета, или я не прав?
источник
19:19пожаловаться#11

BD

Bogdan Diadenko in Ваdоо PHP Мееtuр
Yushkevich Vitaly
Мне кажется, тут вопрос немного по другому надо сформулировать.

Ограничение времени выполнения легко крутится настройками и не должно быть проблемой.

Скорее вопрос, как эффективнее работать с этим.

Выше предложили отличный вариант через демонов с лимитом времени выполнения и памяти, чтобы минимизировать утечки. Ну и контролировать результат.
Да, пожалуй вопрос больше об эффективности. Решение с демоном сейчас в работе и работает через редис очередь. Но демон на php в данной конфигурации невозможно запустить параллельно на исполнение.

А возможно есть на примете open-source решения таких демонов на других языках?
источник
19:19пожаловаться#12

YV

Yushkevich Vitaly in Ваdоо PHP Мееtuр
Sergey Kiryakov
а на фронт нужно возвращать результат ли?
Ну тут от задачи зависит. Иногда достаточно «файл успешно сохранен, скоро увидите результат».
Тут уже детали обработки надо лучше понимать
источник
19:19пожаловаться#13

YV

Yushkevich Vitaly in Ваdоо PHP Мееtuр
Bogdan Diadenko
Да, пожалуй вопрос больше об эффективности. Решение с демоном сейчас в работе и работает через редис очередь. Но демон на php в данной конфигурации невозможно запустить параллельно на исполнение.

А возможно есть на примете open-source решения таких демонов на других языках?
Что значит нельзя запустить параллельно?
Вы можете запустите их несколько, либо из мастер форкнуть
источник
19:20пожаловаться#14

BD

Bogdan Diadenko in Ваdоо PHP Мееtuр
Yushkevich Vitaly
Такой файл отлично пилится на несколько потоков и обрабатывается разными вариантами, например демонами уже. А на фронт возвращать результат через пуш
Можно и пуш, можно и по классике polling.
источник
19:20пожаловаться#15

YV

Yushkevich Vitaly in Ваdоо PHP Мееtuр
Bogdan Diadenko
Можно и пуш, можно и по классике polling.
Понятно, что можно. Но пулинг будет менее эффективным решением
источник
19:20пожаловаться#16

YV

Yushkevich Vitaly in Ваdоо PHP Мееtuр
Лучше берите те технологии, которые вы знаете. Можете и го взять, но для Php это вполне решаемая задача
источник
19:22пожаловаться#17

BD

Bogdan Diadenko in Ваdоо PHP Мееtuр
Yushkevich Vitaly
Что значит нельзя запустить параллельно?
Вы можете запустите их несколько, либо из мастер форкнуть
Параллельные воркеры возьмут в работу одну и ту задачу одновременно, это изъян моей системы(( Да как вариант переписать, собственно, что и хочу сделать. Но также хочу сделать это максимально эффективно.
источник
19:22пожаловаться#18

SK

Sergey Kiryakov in Ваdоо PHP Мееtuр
Bogdan Diadenko
Параллельные воркеры возьмут в работу одну и ту задачу одновременно, это изъян моей системы(( Да как вариант переписать, собственно, что и хочу сделать. Но также хочу сделать это максимально эффективно.
Тогда очень странно работает очередь.
Кастомизируйте, запоминайте какую задачу взяли
источник
19:23пожаловаться#19

YV

Yushkevich Vitaly in Ваdоо PHP Мееtuр
Bogdan Diadenko
Параллельные воркеры возьмут в работу одну и ту задачу одновременно, это изъян моей системы(( Да как вариант переписать, собственно, что и хочу сделать. Но также хочу сделать это максимально эффективно.
А зачем им дать одну и ту же? Если у вас обработка большого объема данных и хотите ускорить, вы можете из мастер процесса подробить данные и контролировать.

По сути, работа с каналами в го реализована по такому принципу
источник
19:24пожаловаться#20