K
спарк потом прочитает
Size: a a a
2022 February 03
K
и каталист тип стринг
K
вставит
K
K
короче когда повторно те же данные читать бдуешь, выставит тип int
K
а не string)
K
бывает и такое
A
Ну у нас это вообще строка и тянется это уже хз сколько лет и едино для всей агоды, читается в hive/spark/impala
K
вот вы не поверите, но такое поведение может резко изменится
DZ
K
Был просто случай, витрина пол года некорректно считалась, потом оказалось, что из за другого бага была
K
Но осоадочек остался
A
Как оно изменится если в метаданных стоит String на колонке?
I
спасибо!) мы пока еще на втором спарке сидим, но думал есть что то более очевидное
DZ
Да ты как будто на спарке не писал
K
а где вы метаданные возьмете?
DZ
Хайв
A
Хайв
K
а если нет метаданных?
DZ
Плохи ваши дела