YB
Нужно на получателе. Заскейлил окна, рсинк ускорился в 1.5 раза.
Size: a a a
2019 December 06
m
любо!
YB
Дальнейший скейлинг не помогает.
YB
Но все равно далеко не весь канал.
m
net.core.wmem_max?
YB
Но пойду, пожалуй, делами заниматься пока. А потом попробую вдт починить.
YB
net.core.wmem_max?
Уже
PZ
@foxcool а как ты вообще видел процесс подбора роутера для меша? Брать и кандидатов в тикет кидать?
C
YB
Продолжая историю, wdt так и продолжает падать с максимально абстрактными ошибками(половина выглядят как нормальное состояние, половина выглядят, как состояние, которого в принципе не должно быть), хотя я уже даже собрал его из одних и тех версий сорцов на обоих концах.
YB
Рсинк же, в свою очередь, сбросил свои бонусы от тюнинга системы, когда файлы стали чуть меньше(500 кб).
VM
Yanis Benson
Рсинк же, в свою очередь, сбросил свои бонусы от тюнинга системы, когда файлы стали чуть меньше(500 кб).
Тюнинг rsync?
2019 December 07
YB
Ну и в общем финальный итог: примитивный листинг папок собирается файндом, примитивный скрипт процессит очередь с параллелизмом 16 рсинками, канал забивается полностью.
А готовые тулзы так по-человечески и не заработали. Аж хочется что-то своё написать(потому что все так просто только со знанием структуры нижележащей, для произвольных иерархий будет работать не очень).
А готовые тулзы так по-человечески и не заработали. Аж хочется что-то своё написать(потому что все так просто только со знанием структуры нижележащей, для произвольных иерархий будет работать не очень).
VM
Yanis Benson
Ну и в общем финальный итог: примитивный листинг папок собирается файндом, примитивный скрипт процессит очередь с параллелизмом 16 рсинками, канал забивается полностью.
А готовые тулзы так по-человечески и не заработали. Аж хочется что-то своё написать(потому что все так просто только со знанием структуры нижележащей, для произвольных иерархий будет работать не очень).
А готовые тулзы так по-человечески и не заработали. Аж хочется что-то своё написать(потому что все так просто только со знанием структуры нижележащей, для произвольных иерархий будет работать не очень).
Так рсинк же умеет во много потоков и реюз существующих соединений
YB
Так рсинк же умеет во много потоков и реюз существующих соединений
Не умеет первое.
VM
Yanis Benson
Не умеет первое.
ты прав, глянул в скрип, через parallel 8 шт запускатся...
VM
Yanis Benson
Ну и в общем финальный итог: примитивный листинг папок собирается файндом, примитивный скрипт процессит очередь с параллелизмом 16 рсинками, канал забивается полностью.
А готовые тулзы так по-человечески и не заработали. Аж хочется что-то своё написать(потому что все так просто только со знанием структуры нижележащей, для произвольных иерархий будет работать не очень).
А готовые тулзы так по-человечески и не заработали. Аж хочется что-то своё написать(потому что все так просто только со знанием структуры нижележащей, для произвольных иерархий будет работать не очень).
смотрел https://www.resilio.com/individuals/ ? синк на базе bittorent, и у них был форк опенсорнсный
VM
и в целом через торрент синкать
YB
Да, я глядел на нее, у меня такое ощущение, что они собственно тоже задолбались и написали свое. но когда я искал пакеты, увидел там какой-то комбайн с вебмордой и черти чем, и плюнул в этом всем копаться.
VM
Yanis Benson
Да, я глядел на нее, у меня такое ощущение, что они собственно тоже задолбались и написали свое. но когда я искал пакеты, увидел там какой-то комбайн с вебмордой и черти чем, и плюнул в этом всем копаться.
Оно быстрое, 10g забивает. Ну и ты можешь всегда публиковать это через обычный торрент клиент и так же качать. Libtorrent ,быстро и сердито, главное ограничение что это односторонний синк будет