IC
ммм... значит он решил, что парраллелить не надо, либо у тебя там блокировки какие то
Size: a a a
2017 October 26
ШН
то есть, если я несколько раз вызываю dowork, то всё норм
ШН
но один dowork не может более 25%
IC
порпобуй засунуть туда какой нить синтетический тест типа
Enumerable.Range(1,1000000).AsParallel().Sum(p=>MAth.Log(p))
ШН
порпобуй засунуть туда какой нить синтетический тест типа
Enumerable.Range(1,1000000).AsParallel().Sum(p=>MAth.Log(p))
это должно разогнать до 100% (по идее)?
IC
по идее до 50%
NK
Раз тут начали про параллельность, подскажите, куда можно с таким вопросом обратиться: на сервере есть некий тяжёлый файл на обработку, скажем, XML > 50GB. Хочу запилить некую очередь, чтобы каждый следующий воркер брал часть этого файла, обрабатывал его и отдавал результат назад. Так вот, куда копать насчёт дробления файла на части? И вообще, реально ли это?
IC
это должно разогнать до 100% (по идее)?
хотя у меня грузит до 100%
NK
Нужно помнить, что файл может быть не только xml, допускаем и json, mp4, mkv и т.д., соответственно и код для обработки может быть разным
ШН
по идее до 50%
:) выполнилось мгновенно
IC
:) выполнилось мгновенно
число побольше поставь
IC
ну как?
IC
ID:80538042
Раз тут начали про параллельность, подскажите, куда можно с таким вопросом обратиться: на сервере есть некий тяжёлый файл на обработку, скажем, XML > 50GB. Хочу запилить некую очередь, чтобы каждый следующий воркер брал часть этого файла, обрабатывал его и отдавал результат назад. Так вот, куда копать насчёт дробления файла на части? И вообще, реально ли это?
тебе не поможет многопточность в данном случае
IC
потому что у тебя узким местом будет диск, а не процессор
ШН
порпобуй засунуть туда какой нить синтетический тест типа
Enumerable.Range(1,1000000).AsParallel().Sum(p=>MAth.Log(p))
грузит на 95%
IC
грузит на 95%
норм
ШН
значит проблема в коде
ШН
там что-то лочится
IC
значит у тебя где то в коде блокировки или какая то IO работа
NK
тебе не поможет многопточность в данном случае
Не совсем точно описал проблему, воркеры будут находиться на разных машинах, обращаются к серверу и получают маленький кусок этого файла, затем обрабатывают. Сложность - как научить сервер делить файл на части так, чтобы эту часть все ещё можно было бы обработать