В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Объявления конференции HighLoad++

3033 membersпожаловаться на группу
2019 November 08
Объявления конференции HighLoad++
Production Engineers - всегда в команде, нет отдельных команд (как в SRE).
Чем занимаются:
- Мониторинг. Периодически (раз в 5 мин) апускают atop, сохраняя результат на каждой машине. Это помогает в дальнейшем разбираться с проблемами. Можно посмотреть кто когда что сломал.
источник
104311:09пожаловаться#1
Объявления конференции HighLoad++
Переслано от Vaddo
источник
99711:09пожаловаться#2
Объявления конференции HighLoad++
Чтобы развлечь аудиторию, Элина рассказала про интересную проблему “Malloc HTTP”. Когда пришел заголовок “HTTP”, а malloc перевел 4 байта в int, и выделил ‘malloc(“HTTP”)’ памяти.
источник
95011:12пожаловаться#3
Объявления конференции HighLoad++
Следующий рассказ - про велосипеды в Facebook, когда компания делала решения у себя внутри, потому что не было еще общедоступных решений в Open Source.
источник
94411:14пожаловаться#4
Объявления конференции HighLoad++
источник
94811:14пожаловаться#5
Объявления конференции HighLoad++
Шутки для посвященных. Как завалить систему, интерпретируя ответ HTTP 400 от сервиса, которого надо было вызвать по совсем другому протоколу. Сервис должен был вернуть размер памяти. Ок, "HTTP" -> toHex байт зарезервируем, нет проблем).
источник
98111:14пожаловаться#6
Объявления конференции HighLoad++
Данные из Prometheus хранятся ВСЕГДА. Можно поднять историю за любой момент в прошлом. Сильное решение!
источник
93211:16пожаловаться#7
Объявления конференции HighLoad++
Менеджеры любят графики, говорили они.
источник
107511:16пожаловаться#8
Объявления конференции HighLoad++
Scuba - хранилище данных внутри Facebook, работает всегда быстро (шутка про ELK), и имеет неплохой UI для отображения графиков и всех данных.
источник
90911:17пожаловаться#9
Объявления конференции HighLoad++
Оказывается, в сети есть даже Paper про эту систему: https://research.fb.com/publications/scuba-diving-into-data-at-facebook/
Facebook Research
Scuba: Diving into Data at Facebook - Facebook Research
Facebook takes performance monitoring seriously. Performance issues can impact over one billion users so we track thousands of servers, hundreds of PB of daily network traffic, hundreds of daily code...
источник
91911:18пожаловаться#10
Объявления конференции HighLoad++
Scuba выступает бэкендом для разных систем, например для Logview, поиск по stacktrace, все выглядит очень красиво.
источник
87011:19пожаловаться#11
Объявления конференции HighLoad++
В качестве dashboard для отображения метрик используется Cubism.
источник
90011:19пожаловаться#12
Объявления конференции HighLoad++
источник
88111:21пожаловаться#13
Объявления конференции HighLoad++
Стандартный мониторинг и как у фейсбука (зелёный, неожиданно). Один пиксель - одна минута.
источник
91311:21пожаловаться#14
Объявления конференции HighLoad++
Каждая линия - один датацентр, сколько сохраняем данных в БД, или сколько получаем 5xx ошибок.
Очень много информации на одной картинке, но надо привыкнуть
источник
87511:22пожаловаться#15
Объявления конференции HighLoad++
Cubism https://en.wikipedia.org/wiki/Cubism
Wikipedia
Cubism
early-20th-century avant-garde art movement
источник
86911:22пожаловаться#16
Объявления конференции HighLoad++
https://square.github.io/cubism/

Извините напутал. Вот этот. Бесплатный опенсорс тул.
источник
87411:23пожаловаться#17
Объявления конференции HighLoad++
Следующая большая область ответственности у Production Engineer: чинить проблемы (инциденты, в терминах Facebook)
источник
86111:24пожаловаться#18
Объявления конференции HighLoad++
Очень нужны Incident Manager, который не чинит инциденты, но управляет отдельной проблемой: кому позвонить, с кем связаться, и пр.
источник
85811:25пожаловаться#19
Объявления конференции HighLoad++
источник
89511:26пожаловаться#20