Size: a a a

2021 September 30

VP

Vitaly Pismarev in Data Engineers
Uber )
источник

AS

Alexey Stavrov in Data Engineers
У всех NewSQL?
CockroachDB, TiDB, memsql...
источник

I

Igar in Data Engineers
ну отлично. А теперь твоя spark джоба работает 4 часа, и джойны десятков аналитиков работают неправльно, так как таблица пустая.
источник

ИК

Иван Калининский... in Data Engineers
wait, wait, убер разве не на mySQL?
источник

D

Dmitry in Data Engineers
убер первый на vacum громко и пожаловался, из-за этого ушел на mysql
вспомнил, zHeap pg делает, копируя подходы undo оракла
источник

VP

Vitaly Pismarev in Data Engineers
То был сарказм
источник

ИК

Иван Калининский... in Data Engineers
это я написал типа в поддержку))
источник

I

Igar in Data Engineers
ааа, очень тонко
источник

VP

Vitaly Pismarev in Data Engineers
Можно статью поискать про то почему убер пернулся к MySQL с постгри. Помнится, там из за MVCC проблемы и были
источник

AS

Andrey Smirnov in Data Engineers
про CockroachDB @dartov говорил что под нагрузкой всё будет не очень хорошо
источник

AP

Al. P. in Data Engineers
источник

D

Dmitry in Data Engineers
не из-за самого mvcc, а из-за того что версии строк прямо в датафайлах. у них много апдейтов было, апдейты получаются не меняют строку, а помечают текущую старой и создают в том же датафайле новую версию строки. и тереь задница - все индексы надо дергать. плюс еще и вакум через какое-то время
источник

VP

Vitaly Pismarev in Data Engineers
mvcc и реализована через хранение старых версий строк
источник

VP

Vitaly Pismarev in Data Engineers
не вижу противоречий с тем что сказал
источник

ИК

Иван Калининский... in Data Engineers
тонко, да, я так один кластер зачистил. И теперь переписал overwrite, сначала содержимое директории перемещается во временную директорию, потом перемещаются новые данные, подготовленные в ещё другой временной директории, а потом уже удаляется всё временное
источник

D

Dmitry in Data Engineers
в оракле она реализована нормально и таких проблем нет. дело не в mvcc, а кривой реализации
источник

D

Dmitry in Data Engineers
и в mysql таких проблем нет
источник

AZ

Anton Zadorozhniy in Data Engineers
Я такого не говорил)
источник

ИК

Иван Калининский... in Data Engineers
надо встраиваемый смайлик с сарказмом, мой сарказм никогда не понятен((
источник

VP

Vitaly Pismarev in Data Engineers
В оракле есть снапшот ту олд, так что критерий нормальности ещё под вопросом
источник