AZ
И все в Пражской терадате?)
не, в пражской я один такой, остальные сидят по своим офисам
Size: a a a
2019 August 30
E
день добрый, помогите советом: хочу руками подергать getProcResourceValues() из LinuxResourceCalculatorPlugin, чтобы убедиться, что оно корректно работает, подскажите, как это правильно сделать?
2019 September 01
DY
у нас в конторе (до того как ее купила большая контора) всех архитекторов называли принципал инженерами (архитектор была роль в проекте), потому что если архитектор не умеет делать руками - нам такой не нужен, а если умеет - то он наверное больше инженер чем архитектор))
у нас оба фаундера - монстры кернельщики, и код до сих пор пишут
2019 September 02
RI
Инженеры! Есть ли способ сконвертировать static dataframe в streaming dataframe ?
GP
Инженеры! Есть ли способ сконвертировать static dataframe в streaming dataframe ?
Что это значит?)
RI
Что это значит?)
Столкнулся с проблемой. Если писать просто dataframe в кафку через 'df.writeStream.', то он ругается. Говорит датафрейм не стримовый
AC
просто нужно писать через
writeRI
просто нужно писать через
writeэтот вариант тоже не работает.
JobScheduler: Error running job streaming job 1567422530000 ms.0
java.lang.NullPointerException
at org.apache.spark.sql.SQLImplicits.rddToDatasetHolder(SQLImplicits.scala:220)
RB
А есть кто крутит TimescaleDB на таблицах 1-3млдр записей?
ПФ
О, тут боты с новой схемой работы. Сначала плстят невинную картинку в чат, потом заменяют её на спам
2019 September 03
OI
Привет!
Подскажите, пожалуйста, где искать логи хайва в hdp3? /var/log/hive/hiveserver2.log
Вот здесь что-то похожее, но нужных логов нет. (пытаюсь найти, почему ночью валился хайв)
Подскажите, пожалуйста, где искать логи хайва в hdp3? /var/log/hive/hiveserver2.log
Вот здесь что-то похожее, но нужных логов нет. (пытаюсь найти, почему ночью валился хайв)
A
ротация файлов?
AP
Привет!
Подскажите, пожалуйста, где искать логи хайва в hdp3? /var/log/hive/hiveserver2.log
Вот здесь что-то похожее, но нужных логов нет. (пытаюсь найти, почему ночью валился хайв)
Подскажите, пожалуйста, где искать логи хайва в hdp3? /var/log/hive/hiveserver2.log
Вот здесь что-то похожее, но нужных логов нет. (пытаюсь найти, почему ночью валился хайв)
В /var/log/hive есть отдельные категории лог-файлов, отдельно сервера (hiveserver2*), метастора (hivemetastore*), LLAP (hiveserver2Interactive*) и т.п. Может быть, у тебя LLAP падает, например, - детальная ошибка будет в соответствующем логе либо вообще в YARN логах daemon'ов.
OI
ротация файлов?
да вроде не должны были удалиться
A
не удаляются, но там же они /var/log/hive/hiveserver2.log.{date} висят
A
ну и быть уверенным что вы на правильной машинке
OI
Alexander Piminov
В /var/log/hive есть отдельные категории лог-файлов, отдельно сервера (hiveserver2*), метастора (hivemetastore*), LLAP (hiveserver2Interactive*) и т.п. Может быть, у тебя LLAP падает, например, - детальная ошибка будет в соответствующем логе либо вообще в YARN логах daemon'ов.
блин, точно) тупанул)
OI
спасибо!
OI
не удаляются, но там же они /var/log/hive/hiveserver2.log.{date} висят
ага, спасибо большое) вроде похоже на правду, осталось найти проблему)