Size: a a a

Scala User Group

2021 June 03

SK

Sergey Kaurov in Scala User Group
А что не понятно с моим вопросом? Ищу цифры из колонки datetime, которые попадают в диапазон
start - end (start и end переменные которые ручками ввожу)
источник

SK

Sergey Kaurov in Scala User Group
Range работает с диапазоном и отдаёт true или false
источник

SK

Sergey Kaurov in Scala User Group
Просто я руками прописывал дату, теперь надо что бы колонку datetime пропускало выражение через себя и не знаю как записать
источник

Oℕ

Oleg ℕizhnik in Scala User Group
Ну для начала, в скале нет "колонок"
источник

Oℕ

Oleg ℕizhnik in Scala User Group
Нет datetime
источник

АР

Андрей Романов... in Scala User Group
вы, наверное, спарк имеете в виду?
источник

Oℕ

Oleg ℕizhnik in Scala User Group
Может быть, вы spark-sql подразумеваете?
источник

SK

Sergey Kaurov in Scala User Group
Да.. Spark.. Извиняюсь..
В другом не работал
Вижу по сайтам, что под линукс можно поставить и запросы делать..
источник

SK

Sergey Kaurov in Scala User Group
Datetime это я так назвал колонку в Cassandra
источник

Oℕ

Oleg ℕizhnik in Scala User Group
Ну я могу порекомендовать спросить в другом чате, где вы состоите (Data Engineers), там есть все люди из этого чата, что знают спарк плюс ещё какие-то люди не из этого чата
источник

SK

Sergey Kaurov in Scala User Group
На самом деле даты timestamp преобразованные по шаблону yyyMMdd
источник

Oℕ

Oleg ℕizhnik in Scala User Group
ну видите, как много непонятного
источник

Oℕ

Oleg ℕizhnik in Scala User Group
У вас там целый деплоймент скрытый
источник

SK

Sergey Kaurov in Scala User Group
Так вы же Scala'веды жж.. Я и к вам 😊 обратился...
источник

АР

Андрей Романов... in Scala User Group
если в такой формулировке - скорее всего, вам поможет реализация своей udf с логикой фильтрации
источник

АР

Андрей Романов... in Scala User Group
именно по колонке
источник

АР

Андрей Романов... in Scala User Group
попробуйте найти именно по udf информацию - возможно, вам поможет
источник

SK

Sergey Kaurov in Scala User Group
Хорошо, спасибо. Посмотрю сейчас.
источник

Oℕ

Oleg ℕizhnik in Scala User Group
так вы же не про скалу спрашиваете
источник

SK

Sergey Kaurov in Scala User Group
Так запросы под Spark на Scala так отличаются что ли? Или я что-то путаю..
источник