Size: a a a

2020 February 13

AB

Anton Balagaev in Data Engineers
Alexey Evdokimov
хм, чё-то в гринпламе постгис какой-то сильно дремучий вообще. чуть ли не десятилетней давности, ужс
Вообще в GP свой pl/pgsql, и развивается он отдельно, просто есть совместимость с определёнными версиями postgres. Говорить о том, что GP отстаёт от PG - некорректно. Их пути давно разошлись и они постоянно развивались.
источник

AE

Alexey Evdokimov in Data Engineers
Anton Balagaev
Вообще в GP свой pl/pgsql, и развивается он отдельно, просто есть совместимость с определёнными версиями postgres. Говорить о том, что GP отстаёт от PG - некорректно. Их пути давно разошлись и они постоянно развивались.
геодата в постгре это стороннее расширение, оно от версии языка не зависит. к разной постгре можно разные постгисы подключать, если есть интерфейс.
но greenplum geospatial == postgis 2.1.5, а это версия где-то около 2014 года, если мне склероз не изменяет
источник

AE

Alexey Evdokimov in Data Engineers
глянул щас, в нашем коде до портирования всего на спарк минимальная версия постгиса была 2.3
источник
2020 February 14

N

Nikita Blagodarnyy in Data Engineers
Граждане, есть ли смысл выносить кластер зукипера на отдельные сервера? Речь про бареметалл.
источник

UD

Uncel Duk in Data Engineers
Если "комплаенс", да
источник

N

Nikita Blagodarnyy in Data Engineers
В каком смысле комплаенс?
источник

AZ

Anton Zadorozhniy in Data Engineers
Nikita Blagodarnyy
Граждане, есть ли смысл выносить кластер зукипера на отдельные сервера? Речь про бареметалл.
Нет, достаточно на быстрый  диск который никто больше не использует
источник

AZ

Anton Zadorozhniy in Data Engineers
(Но лучше иметь 5 ЗК в таком конфиге)
источник

N

Nikita Blagodarnyy in Data Engineers
Ну я и хочу 5, но на выделенных тачках. Жухленьких каких-то.
источник

Е

Евгений in Data Engineers
Nikita Blagodarnyy
Граждане, есть ли смысл выносить кластер зукипера на отдельные сервера? Речь про бареметалл.
яндекс рекомендует выносить
источник

AZ

Anton Zadorozhniy in Data Engineers
Nikita Blagodarnyy
Ну я и хочу 5, но на выделенных тачках. Жухленьких каких-то.
главное диски быстрые
источник

Е

Евгений in Data Engineers
там, насколько я понял, не с диском проблемы, а сетью
источник

Е

Евгений in Data Engineers
типа зукипер очень чувствителен к задержкам, и если другие приложения съедят сеть - то гг
источник

N

Nikolay in Data Engineers
ЗК делает fsync. Если он на том же сервере ,что КХ , который пишет все в кэш , то в конечном итоге сессии в ЗК начнут протузать и посыпятся ошибки
источник

N

Nikolay in Data Engineers
Т.е нужно смотреть для чего вы используете ЗК
источник

N

Nikolay in Data Engineers
Если. Для КХ , то нельзя его на сервере с КХ размещать. А если у вас что-то другое , то нужно думать
источник

N

Nikita Blagodarnyy in Data Engineers
Да для всего. ClickHouse, HBase/прочий ходуп, кафка, еще пару самописов туда состояние будут сохранять.
источник

ME

Mikhail Epikhin in Data Engineers
Для кх лучше отдельный поднимать
источник

ME

Mikhail Epikhin in Data Engineers
Кх может много данных в ЗК писать
источник

ME

Mikhail Epikhin in Data Engineers
Были случаи, когда КХ много нод поднимал и по памяти ЗК кончался
источник