Телеграмм чат группы devops_news страница 1

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

DevOps News

2102 membersпожаловаться на группу

1
2
›
…
»

2016 August 06

На вчерашней конференции Яндекса о Porto был задан коварный вопрос: зачем они там пилят свои велосипеды при наличии опенсорсных аналогов, например докера. Ответ был - когда нам нужны эти инструменты - их еще нет, а когда они появляются - слишком больно переходить.
В Uber, как оказалось, тоже запилено множество in-house решений, а бизнес-логика реализована на Python, Node.js, Go, и Java.

https://eng.uber.com/tech-stack-part-one/
https://eng.uber.com/tech-stack-part-two/

Uber Engineering Blog

The Uber Engineering Tech Stack, Part I: The Foundation

Uber’s mission is transportation as reliable as running water, everywhere, for everyone. Here's the first of a two-part series on the tech stack that Uber Engineering uses to make this happen.

источник

23900:22пожаловаться #1

Биографический лонгрид от создателя системы защиты от DDOS Александра Лямина, увидевший свет на прошлой неделе
https://habrahabr.ru/post/306776/

Его конкурент из США CloudFlare рассказывает о своих решениях регулярно, недавний пост о TCP-стеке в Linux он начал с козырей:
"- What is the point of running an operating system at all?"
https://blog.cloudflare.com/why-we-use-the-linux-kernels-tcp-stack/

Хабрахабр в гостях у Александра Лямина, QRATOR

Полная версия видео доступна в конце публикации и по ссылке Это была лишь середина жаркого московского июля, который вот-вот подойдёт к концу. Договорившись с...

источник

25200:30пожаловаться #2

Неплохая статья про подход GitHub'а к решению проблемы онлайн Alter'ов таблиц в MySQL. Примечателен он тем, что в отличии от pt-online-schema-change базируется не на триггерах, а значит позволяет мигрировать несколько таблиц и работает ощутимо быстрее.
Подробнее в их блоге:
http://githubengineering.com/gh-ost-github-s-online-migration-tool-for-mysql/

источник

26500:41пожаловаться #3

И продолжая тему MySQL.
Orchestrator - менеджер топологий для MySQL. Позволяет автоматизировать управление большими кластерами, делаеть автоматический FailOver в случаи падения одного из промежуточных мастеров.
https://www.percona.com/blog/2016/03/08/orchestrator-mysql-replication-topology-manager/

Percona Database Performance Blog

Orchestrator: MySQL Replication Topology Manager - Percona Database Performance Blog

This blog post discusses Orchestrator: MySQL Replication Topology Manager. It will give a general overview of the features of Orchestrator, a replication topology manager for MySQL

источник

34600:47пожаловаться #4

2016 August 07

На днях Netflix выложил в OpenSource свою систему автоматического исправления неисправностей под названием Winston. По сути данная система получает событие, например alert от мониторинга и на базе некоторых заранее определенных правил (runbook'ов) проверяет не является ли оно false-positive, собирает дополнительную информацию и пытается его исправить.
Подробности в их корпоратичном блоге: http://techblog.netflix.com/2016/08/introducing-winston-event-driven.html

источник

67501:36пожаловаться #5

2016 August 08

Неплохая статья, в которой автор пытается разобраться зачем Google имплементировал свой протокол (QUIC) с гарантированной доставкой поверх UDP:
https://ma.ttias.be/googles-quic-protocol-moving-web-tcp-udp/

Google’s QUIC protocol: moving the web from TCP to UDP

The QUIC protocol (Quick UDP Internet Connections) is an entirely new protocol for the web developed on top of UDP instead of TCP.

источник

29412:16пожаловаться #6

Еще одна статья о том что такое SRE для Google - по большей части похоже на краткий пересказ их SRE Book:
http://highscalability.com/blog/2016/7/18/how-does-google-do-planet-scale-engineering-for-a-planet-sca.html

Highscalability

How Does Google do Planet-Scale Engineering for a Planet-Scale Infrastructure? - High Scalability -

How does Google keep all its services up and running? They almost never seem to fail. If you...

источник

32512:19пожаловаться #7

2016 August 09

Ознакомительный курс о микросервисах, Docker и Kubernetes на Udacity.
Регистрация не нужна, можно сразу смотреть.
https://classroom.udacity.com/courses/ud615

источник

140609:51пожаловаться #8

2016 August 10

Netflix опубликовал подробности об архитектуре их сервиса тестирования скорости доступа в интернет (fast.com):
http://techblog.netflix.com/2016/08/building-fastcom.html

Internet Speed Test

How fast is your download speed? In seconds, FAST.com's simple Internet speed test will estimate your ISP speed.

источник

31309:46пожаловаться #9

Редкий пример отладки реального segfault'а с полными выводами того что написал gdb и объяснениями логики каждого следующего шага:
http://www.brendangregg.com/blog/2016-08-09/gdb-example-ncurses.html

источник

33510:03пожаловаться #10

Howto мониторить ваш Kubernetes при помощи Prometheus от CoreOS. К сожалению без каких-либо характеристик производительности, но показывает в целом возможности системы.
https://coreos.com/blog/monitoring-kubernetes-with-prometheus.html

Monitoring Kubernetes with Prometheus | Prometheus Docker Monitoring

Monitoring is one of the pillars of successful infrastructure. Read our blog and learn how to monitor Kubernetes with Prometheus.

источник

30711:22пожаловаться #11

2016 August 12

Какая то неделя новостей про Netflix получается. На днях они опубликовали статью о том, как они релизят новые потенциально популярные фильмы и сериалы. В ней они описывают логику работы своего кэша и системы доставки контента в целом.
http://techblog.netflix.com/2016/08/netflix-and-fill.html

Netflix and Fill

the complex reality of global content distribution

источник

27810:02пожаловаться #12

Treasuredata опубликовали интересную статью о распределенном сборе логов с кучи контейнеров.
Статья по большей части про подходы в целом, но есть также немного про конкретные решения.
https://blog.treasuredata.com/blog/2016/08/03/distributed-logging-architecture-in-the-container-era/

Treasure Data Blog - Enterprise Customer Data Platform

Distributed Logging Architecture in the Container Era - Treasure Data Blog

источник

54211:44пожаловаться #13

Pinterest опубликовал заметку о том, как они делают выгрузку данных из MySQL в S3 для последующего анализа. Примечательно, что на текущий момент они выгружают более 100 ТБ сырых данных в день.
В статье описывается эволюция архитектуры системы выгрузки. К сожалению, это лишь первая статья из серии и обрывается она, как всегда, на самом интересном.
https://engineering.pinterest.com/blog/tracker-ingesting-mysql-data-scale-part-1

Pinterest Engineering

Tracker: Ingesting MySQL data at scale - Part 1

At Pinterest we’re building the world’s most comprehensive discovery engine, and part of achieving a highly personalized, relevant and fast service is running thousands of jobs on our Hadoop/Spark cluster.

источник

29012:40пожаловаться #14

Прекрасная история от cloud flare про отладку хитрого бага, который изредка не позволял установить соединение с клиентом.
https://blog.cloudflare.com/this-is-strictly-a-violation-of-the-tcp-specification/

The Cloudflare Blog

This is strictly a violation of the TCP specification

I was asked to debug another weird issue on our network. Apparently every now and then a connection going through CloudFlare would time out with 522 HTTP error.

источник

30819:31пожаловаться #15

Продолжая пятничный флуд - подробное исследование того, как работает балансировка нагрузки и service discovery в Docker 1.12:
https://sreeninet.wordpress.com/2016/07/29/service-discovery-and-load-balancing-internals-in-docker-1-12/

Sreenivas Makam's Blog

Service Discovery and Load balancing Internals in Docker 1.12

Docker 1.12 release has revamped its support for Service Discovery and Load balancing. Prior to 1.12 release, support for Service discovery and Load balancing was pretty primitive in Docker. In thi…

источник

54719:47пожаловаться #16

Видео доклада инженера из RiotGames о использовании докера и дженкинса для автоматизации и контейнеризации сборки. В докладе объясняется как сам подход, так и рассказывается основные проблемы с которыми они столкнулись
:
https://youtu.be/YViFZBoKqjg

И индекс статей на эту же тему:
http://engineering.riotgames.com/news/thinking-inside-container-dockercon-talk-and-story-so-far

Thinking Inside the Container- A Continuous Delivery Story - Use Case Track

Riot builds a lot of software. At the start of 2015 we were looking at 3000 build jobs over a hundred different applications and dozens of teams. We were han...

источник

41020:06пожаловаться #17

Полезный анализ трендов ценообразования у крупнейших поставщиков IaaS (GCN, AWS и другие).
http://redmonk.com/rstephens/2016/08/05/iaas-pricing-patterns-and-trends/

IaaS Pricing Patterns and Trends

It’s been almost two years since our last update of infrastructure as a service pricing. Given the growing size and importance of the cloud market, the competition amongst IaaS providers remains fi…

источник

33820:10пожаловаться #18

Очень крутая статья, к тому же написанная понятным языком, объясняющая зачем процессору нужно несколько уровней кэша (а также что такое кэш и зачем он нужен):
https://fgiesen.wordpress.com/2016/08/07/why-do-cpus-have-multiple-cache-levels/

Why do CPUs have multiple cache levels?

This is a reader question from “jlforrest” that seems worth answering in more detail than just a single sentence: I understand the need for a cache but I don’t understand why there are …

источник

38420:13пожаловаться #19

2016 August 17

Netflix рассказал про то, как они делали распределению отказоустойчивую очередь для нужд оркестрации микросервисов. Примечательно, что они сознательно решили сделать свое собственное решение, а не использовать Kafka, Amazon AWS и др.
Подробности о том как, зачем и насколько хорошо у них вышло в их блоге:
http://techblog.netflix.com/2016/08/distributed-delay-queues-based-on.html

Distributed delay queues based on Dynomite

Netflix’s Content Platform Engineering runs a number of business processes which are driven by asynchronous orchestration of micro-services...

источник

35202:13пожаловаться #20

1
2
›
…
»