K
Да ы просто экстернал таблицы попробуйте
Size: a a a
2020 March 04
K
И все
A
хочешь чтобы я ссылки на комиты в хортон репе привёл?
ванильный апачевский спарк 2.3 и 2.4 не работает с хайвом 3
ванильный апачевский спарк 2.3 и 2.4 не работает с хайвом 3
K
хочешь чтобы я ссылки на комиты в хортон репе привёл?
ванильный апачевский спарк 2.3 и 2.4 не работает с хайвом 3
ванильный апачевский спарк 2.3 и 2.4 не работает с хайвом 3
Вы пробовали экстернал таблицы ?
K
Просто сделай п create external table
K
Из какойнибудт таблицы существующей
K
И попробуйте спарком
A
пожалуйста посмотри на ссылки что я привел, там именно код на скале, ты её любишь =)
https://github.com/hortonworks/spark2-release/commit/e16976449aedcb88ca6f7e3c640e6cd8299b7576#diff-af87f9b0fb6af6b88e185e156642fa72
https://github.com/hortonworks/spark2-release/commit/e16976449aedcb88ca6f7e3c640e6cd8299b7576#diff-af87f9b0fb6af6b88e185e156642fa72
A
внимательно читаем название и что оно добавляет,
а потом ищем этот же код в ванильном спарке
а потом ищем этот же код в ванильном спарке
A
хортонворк спарк
K
Это все фичи
A
коробка у всех разная
K
Хайва третьего
K
Кислые таблицы, бакетинг
K
Это все то что не работает для external таблиц
A
loadPartition
loadTable
loadDynamicPartitions
loadTable
loadDynamicPartitions
A
это всё фичи, а не базовы функционал?
K
Скажите пожалуйста , вы пробовали external таблицы ?
A
скажите пожалуйста, а вы пробовали ванильный апач спарк и hive 3 ?
K
скажите пожалуйста, а вы пробовали ванильный апач спарк и hive 3 ?
Нет не пробовал, мне не нужны были кислые менедж таблицы