D
Товарищи, расскажите то такое winutils с хадупом для винды ? это какая-то заглушка от хадупа или полноценный ?
Size: a a a
2021 February 05
2021 February 06
E
парни, как можно запринтить контект команды в терминале/в файл в маке? гуглю, но видимо, запрос не правильно формулирую
С
парни, как можно запринтить контект команды в терминале/в файл в маке? гуглю, но видимо, запрос не правильно формулирую
Что значит "запринтить"?
UR
Товарищи, расскажите то такое winutils с хадупом для винды ? это какая-то заглушка от хадупа или полноценный ?
Смотря что считать полноценным. Но жабье приложение которое должно думать, что на машине есть хадуп - так думает
С
cat /some/file | grep "some_filter" >> /to/other/file
что то такое я так понимаю?
что то такое я так понимаю?
UR
Спарк например, который почему-то считает, что чтобы писать в какой-нибудь паркет обязательно нужен хадуп
E
Что значит "запринтить"?
Хороший вопрос)
Есть репка https://github.com/welcoMattic/kymsu
После инсталляции доступна команда 'kymsu'. Вот ее содержимое я и хочу посмотреть)
Есть репка https://github.com/welcoMattic/kymsu
После инсталляции доступна команда 'kymsu'. Вот ее содержимое я и хочу посмотреть)
E
cat /some/file | grep "some_filter" >> /to/other/file
что то такое я так понимаю?
что то такое я так понимаю?
Не, не содержимое файла, а содержимое, которое упаковано в одной команде)
Если я вообще правильно изъясняюсь))
Если я вообще правильно изъясняюсь))
С
Не, не содержимое файла, а содержимое, которое упаковано в одной команде)
Если я вообще правильно изъясняюсь))
Если я вообще правильно изъясняюсь))
Ну так тут вместо файла что-то другое может быть, в частности с грепом - тут две команды, как самый ходовой пример, по такому же принципу идёт редирект любого output программы
Некая_команда & >> /some/file
Обычно как-то так делается, с амперсандом
Некая_команда & >> /some/file
Обычно как-то так делается, с амперсандом
D
Смотря что считать полноценным. Но жабье приложение которое должно думать, что на машине есть хадуп - так думает
он может работать в паралель ? я mr джобу подсунул несколько файлов, но вижу что лишь один мапер работает, то же самое с редюсорами, создается столько, сколько файлов сколько я редюсеров попросил, но занято лишь одно ядро
С
Не, не содержимое файла, а содержимое, которое упаковано в одной команде)
Если я вообще правильно изъясняюсь))
Если я вообще правильно изъясняюсь))
GP
Товарищи, расскажите то такое winutils с хадупом для винды ? это какая-то заглушка от хадупа или полноценный ?
наверное полноценное, сикнь ссылку; а вообще они обычно не нужны, я не помню чего-то необходимого в навтиных либах
GP
Спарк например, который почему-то считает, что чтобы писать в какой-нибудь паркет обязательно нужен хадуп
IO спарка абстрагировано через хадуп как минимум ¯\_(ツ)_/¯
D
наверное полноценное, сикнь ссылку; а вообще они обычно не нужны, я не помню чего-то необходимого в навтиных либах
GP
я только не понимаю зачем оно тебе
D
я только не понимаю зачем оно тебе
я думал mr job без них не запустить
GP
я думал mr job без них не запустить
запустить
D
правда может это я унаследовал от спарка ощущение