A
ну вот он не работает, падает на попытке подключения
именно этот комит и исправляет этот недочёт
хортон его у себя вкомитила Mar 10, 2018
именно этот комит и исправляет этот недочёт
хортон его у себя вкомитила Mar 10, 2018
Size: a a a
2020 March 04
A
то есть если вы пользуетесь хортоном, то у вас оно работало уже давно
A
а вот попытка запустить ванильный апач спарк обречена на неудачу
K
а вот попытка запустить ванильный апач спарк обречена на неудачу
С external таблицами ?
A
и да, у нас почти все таблицы external
A
само подключение к хайв метастору не проходит
ещё до всяких таблиц
ещё до всяких таблиц
K
само подключение к хайв метастору не проходит
ещё до всяких таблиц
ещё до всяких таблиц
С какой ошибкой ?
A
сейчас не вспомню, ошибка была на протоколе, даже при попытаке скормить либы хайва 2.3
AZ
Что за акаунтинг
сколько ресурсов какой джоб съел
2020 March 05
EV
Привет всем! Кто-то юзает Snowflake? Какие основные боли? :)
ME
Привет всем! Кто-то юзает Snowflake? Какие основные боли? :)
Через web UI файлики медленно грузятся 😂
EV
AS
пытаюсь сделать join cо стороны спарка к hbase таблице, join падает с java.lang.ClassNotFoundException: org.apache.hadoop.hbase.spark.SparkSQLPushDownFilter
при этом простая вычитка(sqlContext.read.options(Map(HBaseTableCatalog.tableCatalog->cat)).format("org.apache.hadoop.hbase.spark").load() работает (как и массовая запись).
мне надо в каждый регион сервер подложить jar?! в чем еще может быть проблема?
использую https://github.com/apache/hbase-connectors/tree/master/spark
spark 2.4.4 hbase 2.2.2 (ванильные)
при этом простая вычитка(sqlContext.read.options(Map(HBaseTableCatalog.tableCatalog->cat)).format("org.apache.hadoop.hbase.spark").load() работает (как и массовая запись).
мне надо в каждый регион сервер подложить jar?! в чем еще может быть проблема?
использую https://github.com/apache/hbase-connectors/tree/master/spark
spark 2.4.4 hbase 2.2.2 (ванильные)
K
кто nifi в кубере держит?
S
пытаюсь сделать join cо стороны спарка к hbase таблице, join падает с java.lang.ClassNotFoundException: org.apache.hadoop.hbase.spark.SparkSQLPushDownFilter
при этом простая вычитка(sqlContext.read.options(Map(HBaseTableCatalog.tableCatalog->cat)).format("org.apache.hadoop.hbase.spark").load() работает (как и массовая запись).
мне надо в каждый регион сервер подложить jar?! в чем еще может быть проблема?
использую https://github.com/apache/hbase-connectors/tree/master/spark
spark 2.4.4 hbase 2.2.2 (ванильные)
при этом простая вычитка(sqlContext.read.options(Map(HBaseTableCatalog.tableCatalog->cat)).format("org.apache.hadoop.hbase.spark").load() работает (как и массовая запись).
мне надо в каждый регион сервер подложить jar?! в чем еще может быть проблема?
использую https://github.com/apache/hbase-connectors/tree/master/spark
spark 2.4.4 hbase 2.2.2 (ванильные)
S
оно?
S
кто nifi в кубере держит?
а сам ушел с найфай митапа )
S
а вот дослушал бы!
K
а сам ушел с найфай митапа )
а там про это рассказывали?
K
думаю чем грузить с фтп консистентно много данных