Size: a a a

Чат конференции HighLoad++

2020 September 21

m

mc in Чат конференции HighLoad++
Andrey Lepikhov
Я как раз занимаюсь шардированием в постгресе, могу я позадавать уточняющие вопросы в личке?
спасибо. обращусь
источник
2020 September 22

N

Nikolay in Чат конференции HighLoad++
mc
Приветствую коллеги!

Такой вопрос. Какая база данных подходит по хранение grid данных?

Наша компания занимается метеоданными. Есть апи которые по запрашиваемой координате отдает метеопараметры в точке: температуру, осадки, давление и тд. И отдает прогноз по этим параматрам на несколько суток вперед. Нагрузка с каждым месяцем растет. Простое чтение из файлов уже не справляется. Данные хранятся в grid-файлах. Изучаем возможность складывать данные в БД для быстрого доступа. Хотим сделать кластер на основе выбранного решения, поэтому БД должна поддерживать высокую доступность (репликация, шардирование, партицирование). Рассматриваем такие варианты: PostGIS, ScyllaDB, GeoMessa. Но уверенности нет ни в одном. Может кто-то имел дело с похожей задачей, буду благодарен за советы.
Выглядит как time series — обязательно надо посмотреть на Timescale, там есть отличное партиционирование для таких данных, в 2.0 заявлен и шардинг, причём опенсорсный (точнее, то что они называют chunking, clustering), там ещё хорошая компрессия есть  https://blog.timescale.com/blog/multi-node-petabyte-scale-time-series-database-postgresql-free-tsdb/
источник

N

Nikolay in Чат конференции HighLoad++
Sherzod
Добрый день, господа, посоветуйте какую-нибудь литературу, статьи по highload архитектуре, best practices и др
понимаю, что нужен текст, но вот эти видео стоит всё же глянуть 🙂 https://www.youtube.com/playlist?list=PL4_hYwCyhAvZuoK6Y0FaCh-25jEYtBvDo

Highload (4 курс, весна 2020), лектор -- Олег Бунин / лекции на Физтехе
источник
2020 September 23

ky

kirill yagovkin in Чат конференции HighLoad++
это я считаю хорошей книжкой, я из нее много подчерпнул, но самая лучшая книжка - столкнуться с этим на практике. Высоконагруженные телеграм боты на sqlite не считаются
источник

ky

kirill yagovkin in Чат конференции HighLoad++
Sherzod
Добрый день, господа, посоветуйте какую-нибудь литературу, статьи по highload архитектуре, best practices и др
источник

S

Sherzod in Чат конференции HighLoad++
Спасибо большое
источник

AG

Alex Gamzov in Чат конференции HighLoad++
Добрый день. Подскажите пожалуйста, а что с гостиницами Памир и Тянь-Шань в этот раз? На страничке highload2020 нет возможности заказать гостиницу, только билет купить.
источник

OB

Oleg Bunin in Чат конференции HighLoad++
Alex Gamzov
Добрый день. Подскажите пожалуйста, а что с гостиницами Памир и Тянь-Шань в этот раз? На страничке highload2020 нет возможности заказать гостиницу, только билет купить.
Мы ещё договариваемся с ними :(
источник

OB

Oleg Bunin in Чат конференции HighLoad++
Чуть-чуть подождите
источник

AG

Alex Gamzov in Чат конференции HighLoad++
Ок, спасибо
источник

NK

ID:0 in Чат конференции HighLoad++
🔥Breaking News🔥

29 и 30 сентября приглашаем на бесплатные дни DevOps Live 2020. В программе 8 докладов о DevOps и на смежные темы!
Изучайте расписание! И не забудьте зарегистрироваться.

Два открытых дня стали возможны благодаря генеральному парнтёру конференции — «Sportmaster Lab».

✅«Sportmaster Lab» — это большое IT-подразделение Спортмастер, в котором сейчас работает свыше 1000 специалистов. Мы поддерживаем работоспособность наших сайтов, допиливаем приложения, дополняя его все новыми и новыми фичами, и стараемся открыто рассказывать о своей работе.

До встречи на DevOps Live!
источник

SR

SDKiller Ru in Чат конференции HighLoad++
ID:0
🔥Breaking News🔥

29 и 30 сентября приглашаем на бесплатные дни DevOps Live 2020. В программе 8 докладов о DevOps и на смежные темы!
Изучайте расписание! И не забудьте зарегистрироваться.

Два открытых дня стали возможны благодаря генеральному парнтёру конференции — «Sportmaster Lab».

✅«Sportmaster Lab» — это большое IT-подразделение Спортмастер, в котором сейчас работает свыше 1000 специалистов. Мы поддерживаем работоспособность наших сайтов, допиливаем приложения, дополняя его все новыми и новыми фичами, и стараемся открыто рассказывать о своей работе.

До встречи на DevOps Live!
расписание в гугл-таблице это сильно
источник

RB

Ruslan Baimukhametov in Чат конференции HighLoad++
SDKiller Ru
расписание в гугл-таблице это сильно
Ровно как и 1К айтишников для магазина
источник

SR

SDKiller Ru in Чат конференции HighLoad++
там же битрикс
источник

RB

Ruslan Baimukhametov in Чат конференции HighLoad++
SDKiller Ru
там же битрикс
Аааа ну тогда согласен, надо
источник

SR

SDKiller Ru in Чат конференции HighLoad++
ему нужно много памяти, много диска, много айтишников
источник
2020 September 24

FS

Fedor Sukharev in Чат конференции HighLoad++
@olegbunin , сколько потоков одновременных будет на грядущем HL?
источник

ДН

Данил Наумов... in Чат конференции HighLoad++
Fedor Sukharev
@olegbunin , сколько потоков одновременных будет на грядущем HL?
Доброе утро, 16 параллельных треков
источник

KA

Konstantin Aristov in Чат конференции HighLoad++
Alex Gamzov
Добрый день. Подскажите пожалуйста, а что с гостиницами Памир и Тянь-Шань в этот раз? На страничке highload2020 нет возможности заказать гостиницу, только билет купить.
как опытный жЫтель этих гостиниц имею сказать, что лучше с ними напрямую контачить, но при этом говорить, что участник конференции, возможно скидка будет
источник

AG

Alex Gamzov in Чат конференции HighLoad++
Konstantin Aristov
как опытный жЫтель этих гостиниц имею сказать, что лучше с ними напрямую контачить, но при этом говорить, что участник конференции, возможно скидка будет
ммм, спасибо за идею
источник