Использую Threads.@threads for ... end для пакетного запуска внешней программы по множеству файлов, в итоге обработка распределяется равномерно на 8 потоков. Большая часть отработала нормально, но спустя пару часов оказалось, что все восемь процессов стали потреблять 0% CPU и просто висят. Кто-нибудь сталкивался с таким поведением? Не хочется делать поверх ещё и менеджер, который будет следить за процессами, убивать и перезапускать их...

Может dead-lock?

Кстати может быть, я в каждой итерации дописываю строчку в файл и еще добавляю элемент в конец массива. Запись в файл вроде как thread-safe, а вот насчет push! не уверен...

Хотя странно, что внешний процесс все равно крутится, т.е. это уже не код джулии

по умолчанию я бы предполагал, что любая функция в джулии thread-unsafe, если не сказано обратное

возможно так что взаимодействие с файлами ограничивается самой ОС. У нас был случай в лабе как у коллеги не писались файлы в папке и весь процесс просто зависал из-за McAfee )

Хорошее замечание.

А ось какая? Windows?

Можно проверить на маленьком числе файлов.

Если на маленьком работает, то на большом и в самом деле может операционная система вмешиваться

Да, прогоняю на Windows, и внешний процесс как раз читает один файл и пишет кучу других файлов, но между процессами они никак не пересекаются (то есть это все разные файлы).

И зависает на 0% именно внешний процесс

Хотя и в консоли Джулии прервать выполнение тоже нельзя было

Снова тот же вопрос. Делаю DSL для финансового моделирования (которое про 3 формы, а не оценку активов). Попричесал, чтобы не совсем стыдно было и выложил на гитхаб.

https://github.com/elgator/FinancialReportModel

Я бы порекомендовал превратить это в настоящий пакет.

При всей любви к Плуто, в таком виде сложно им пользоваться.

Pluto можно заменить html для просмотра. Но вот для того, чтобы комментарий дать, надо понимать цель и решаемые задачи. Впрочем, финансовое моделирование несколько далековато от меня…. Как вариант предложить автору в формате нашей встречи сделать доклад. А дальше - обсудим

Можно не все встречи записывать, чтобы технические обсуждения не выносить на всеобщее обозрение

По целям-задачам я написал пару абзацев в этом документе (действительно, сделал экспорт html. Странно, что static html оказался совсем не static). Пока чиркал-баловался удобно было все в одном месте держать. Теперь раскидаю по отдельным файлам и попробую завернуть в пакет.

https://github.com/elgator/FinancialReportModel/blob/main/FinancialReportModel.jl.html

Чтобы html можно было прочитать прямо с гитхаба его надо опубликовать.

В обычном preview посмотреть не получится, насколько я понимаю.