FF
Потому что в вопросе поставлена именно задача классификации
Size: a a a
2020 June 28
$
И еще вопрос. Где взять датасет диалогов из чатов на русском
$
А то я нахожу лишь литературные диалоги
$
А мне надо именно реальное общение в чатах
FF
Можно в телеге историю чата экспортировать, как вариант
A
яндекс же выкладывал
A
оно там не очень реальное, но похоже
$
яндекс же выкладывал
Где
$
Это не очень похоже на реальные диалоги
A
это после обработки файлов
$
$
Потому что там есть места где один юзер говорит подряд две или три отдельных фразы а потом второй отвечает на них по очереди тоде двумя или тремя
$
Поэтому надо сохранять номера говорящих, чтобы не вышло что второй вопрос стал ответом на первый
A
ну да. Но для моих целей это не требовалось, мне нужен был только текст
AK
AK
У меня стоит задача различить чем является фраза юзера, вопросом или не вопросом. Фразы задаются голосовым вводом, поэтому по знаку вопроса в конце предложения не вариант.
Парсишь корпус литературы, делишь на две группы предложений по наличию в конце знака вопроса. Тренируешь на этих двух наборах сетку. Например.
$
Парсишь корпус литературы, делишь на две группы предложений по наличию в конце знака вопроса. Тренируешь на этих двух наборах сетку. Например.
Хорошо, так и сделаю
$
AK
пока взял тот же датасет от яндекса и привел в вид где если во фразе есть вопрос то yes а если нет то no
потренировал классификатор - вроде работает
потренировал классификатор - вроде работает
Какая сетка?