Size: a a a

2020 May 24

p

pragus in ntwrk
С К
я спутал дедупликацию и сжатие.
Это все равно не проблема
источник

СК

С К in ntwrk
pragus
Это все равно не проблема
хорошо,  значит я был не прав и проблем нет, zfs запустится с сжатием и дедупликацией на любом проце и не будет проблем.
зы
но сам не проверял, пока это не точно.
источник

AV

Alexander Vorobyev in ntwrk
Alexander Lunev
Давайте так - откуда мусор радиоактивный?
Оставлю здесь про радиоактивный мусор: сам с месяц назад случайно наткнулся-почитал. Все как положено: фото исследуемых объектов, фото замеров. Плюс, еще много случаев находок просто текстом. Жаль, люди забросили тему: увлекательное чтиво - мне особенно запомнилось про какую-то деталь в гаражах, которая на несколько рентген вокруг светила.
https://caves.ru/threads/%D0%9E%D0%B1%D1%81%D1%83%D0%B6%D0%B4%D0%B5%D0%BD%D0%B8%D0%B5-%D0%BE%D0%BF%D0%B0%D1%81%D0%BD%D1%8B%D1%85-%D0%BD%D0%B0%D1%85%D0%BE%D0%B4%D0%BE%D0%BA.34180/
источник

s

sexst in ntwrk
pragus
Это все равно не проблема
Не-не-не, дедупликация как раз достаточно проблемная штука, жрёт непонятное количество памяти, просчитать можно только максимально возможное потребление, причём оно меняется от кучи параметров, которые можно прямо на ходу поправить. И вообще рекомендуется к включению только если вы точно знаете что это такое, как работает и зачем вам это нужно.

А вот сжатие на лету нынче считается околобесплатной и крайне рекомендуемой вещью. У меня даже телефон оперативку частично поджимает на лету при помощи zram. Причём это прямо из коробки было.
источник

СК

С К in ntwrk
sexst
Не-не-не, дедупликация как раз достаточно проблемная штука, жрёт непонятное количество памяти, просчитать можно только максимально возможное потребление, причём оно меняется от кучи параметров, которые можно прямо на ходу поправить. И вообще рекомендуется к включению только если вы точно знаете что это такое, как работает и зачем вам это нужно.

А вот сжатие на лету нынче считается околобесплатной и крайне рекомендуемой вещью. У меня даже телефон оперативку частично поджимает на лету при помощи zram. Причём это прямо из коробки было.
ну вот я писал выше. Спутал технологии, точнее дедупликацию = сжатию.
По факту то для многих данных дедупликация работает как шикарный архиватор.
зы
кстати синктхинг по той же причине требователен к ресурсам
источник

s

sexst in ntwrk
С К
ну вот я писал выше. Спутал технологии, точнее дедупликацию = сжатию.
По факту то для многих данных дедупликация работает как шикарный архиватор.
зы
кстати синктхинг по той же причине требователен к ресурсам
Ну вот далеко не для многих. Дедупликация это, например, хорошо под практически однотипные виртуалки.

А что такого требовательного в syncthing? Ну block based синхронизация данных, ну хеш от блоков считает и что? Я им уже сколько лет пользуюсь и чот жора не вижу.

Вот чувак 50000 файлов/20Gb на 30 машин синкает и у него и то утилизация процессора была 30% тупо из-за конфликта версий файлов, вызывавшего постоянное сканирование. Конфликт пофиксили, утилизация ушла.
источник

s

sexst in ntwrk
А так дедупликация только оперативку под таблицу хэшей-адресов блоков хочет в относительно больших количествах (и то не обязательно, просто тупить будет).
источник

СК

С К in ntwrk
sexst
Ну вот далеко не для многих. Дедупликация это, например, хорошо под практически однотипные виртуалки.

А что такого требовательного в syncthing? Ну block based синхронизация данных, ну хеш от блоков считает и что? Я им уже сколько лет пользуюсь и чот жора не вижу.

Вот чувак 50000 файлов/20Gb на 30 машин синкает и у него и то утилизация процессора была 30% тупо из-за конфликта версий файлов, вызывавшего постоянное сканирование. Конфликт пофиксили, утилизация ушла.
я сливал около террабайта файлов, каждую неделю что то сильно менялось, не во всём терабайте, но пару сотен гигабайт точно. i5 еле живой был. rsync намного лучше по факту оказался.
источник

s

sexst in ntwrk
Ну так rsync и устроен сильно проще.
Да и syncthing скорее не про синхронизацию терабайтов раз в неделю. Типичный пример где он нужен в личном использовании - keepass базу между компами и телефоном синкать. То есть немного файлов, полностью автоматически, независимо от местонахождения и ip адресов и, по возможности, сразу после изменения содержимого.
источник

Y

Yaroslav in ntwrk
Я рабочую папку между домашним компом и ноутом им стнкаю
источник

СК

С К in ntwrk
Yaroslav
Я рабочую папку между домашним компом и ноутом им стнкаю
утечки данных не боитесь?
источник

Y

Yaroslav in ntwrk
Через домашшний нас
источник

Y

Yaroslav in ntwrk
А не паблик облако
источник

СК

С К in ntwrk
ясно.
источник

Y

Yaroslav in ntwrk
Ну и там тех гайды которые утекут не страшно, они и так в паблике есть
источник

Y

Yaroslav in ntwrk
Но ваще уже много кто перешел на облачные тулы битриксы всякие тимс и прочее
источник

Y

Yaroslav in ntwrk
Люди пизнесс облакам доверяют
источник

Y

Yaroslav in ntwrk
А инженер просто делает себе работу чуть удобней
источник

VK

Vladimir Ka in ntwrk
А конкуренты  с облаков  получают инфу..  Так и строится бизнес.. Друг у друга..  И друг другу..   Все что попадает в облако, то становится доступно всем...
Можете начинать меня пинать.
источник

СК

С К in ntwrk
Vladimir Ka
А конкуренты  с облаков  получают инфу..  Так и строится бизнес.. Друг у друга..  И друг другу..   Все что попадает в облако, то становится доступно всем...
Можете начинать меня пинать.
вы это знаете как сетевой инженер? У вас конкретно как инфа с облака уходит?
источник