SD
Любые, которые меньше длины разбираемого текста. 😊
А если длина будет больше? И что это вобще за токены?
Size: a a a
2020 October 05
AT
А если длина будет больше? И что это вобще за токены?
Токены — суть слова из текста.
AT
Если длина больше длины всего текста (в словах) — не удастся заполнить даже одну цепь Маркова. Потому что слов не хватит. 🤷♀️
SD
Если длина больше длины всего текста (в словах) — не удастся заполнить даже одну цепь Маркова. Потому что слов не хватит. 🤷♀️
Принял. А как понять "суть слова" ?
AT
Принял. А как понять "суть слова" ?
"это слова". 😊
SD
"это слова". 😊
Так как тогда влияет
order? Предложения осмысленнее?AT
"слова в случае применения к тексту на естественном языке".
AT
Так как тогда влияет
order? Предложения осмысленнее?Ближе к исходному тексту. Потому что более длинные куски текста сохраняются.
SD
Ближе к исходному тексту. Потому что более длинные куски текста сохраняются.
А, вот это мне и не надо. Cпасибо :)
b
навскидку не подскажете как копировать данные из tcpstream в tcplistener и наоборот?
D
чё это никак?
Э
чё это никак?
TcpListener не стрим же?
Э
Он только коннекшоны принимает, какие данные?
RS
Он только коннекшоны принимает, какие данные?
в токио он заодно и stream %)
D
Он только коннекшоны принимает, какие данные?
а, про это речь)
D
ну по факту да, из TcpStream в TcpStream копировать можно)
Э
в токио он заодно и stream %)
Разве что
.incoming().RS
> Alternatively TcpListener implements the Stream trait, which allows you to use the listener in places that want a stream