Вы когда-нибудь видели логи? :)

видел логи, для которых гадалка нужна, про нлп не могу придумать кейс

Я - да

И ещё я знаю, что часто бывает кейс, что корневая причина падения не в конце лога, а где-то в середине

Какое-нибудь невнятное сообщение от компилятора с++

Я к Алексею обращался, промазал, извините.

Кажется, что задача распознавания логов требует сначала мучительной предобработки. После того, как она будет закончена, возможно, для nlp уже места не останется.

Я действительно плохо представляю логи в данном случае. Но как я уже продолжил дальше, можно в качестве exploration применить базовые методы и оценить их актуальность для этой задачи.

Я на недавнем Data Fest'е читал доклад "Как не обанкротиться на машинном обучении". Там был один из тезисов - задачу, которую можно решать детерминированным алгоритмом (эвристикой), нужно решать детерминированным алгоритмом. В данном случае, пока объемы не подтянулся к миллионам упавших джобов, задачу будет проще решать эвристиками. Не надо втыкать недетерминированные алгоритмы куда попало - это азартно и весело на стадии исследования, но крайне дорого в доведении до продакшена.

Забавно, как имея одно и тоже мнение можно поспорить. Я пытался намекнуть на детерминированность задачи с логами, а вместо задачи классификация более эвристическую кластеризацию.

👍

Всем привет. По опыту какой дистрибутив кассандры лучше установить в продакшене: Apache Cassandra или DataStax Distribution for Apache Cassandra? Пока тестим данные на Apache Cassandra

По опыту второй, но все индивидуально от объема и типа данных, специфики задачи

Мы брали  datastax Cassandra

Ради графовой бд

ScyllaDB тоже ок

Там вроде лицензия нужна насколько я из сайта понял?

Она лицензированна или можно с коммьюнити в продакш?

Ожидается минимум 500 гига в год, запись 15000 в сек, чтение 3000 в сек

AGPL