Size: a a a

Natural Language Processing

2020 July 27

YB

Yuri Baburov in Natural Language Processing
Futorio Franklin
Да тут дело в другом, чтобы допилить вменяемого состояния нужно знать джангу, энжинкс и фронтенд потому он тоже бывает лагает
Это везде так, с любым программированием и допиливанием проектов под себя. Для другой библиотеки просто вам бы потребовались другие знания.
источник

AK

Anton Kolonin in Natural Language Processing
Привет! А почему удалено?
источник

I

I Апрельский... in Natural Language Processing
Yuri Baburov
Я думал, что речь шла о миллионе записей. У постгреса из-за mvvc подсчёт количества записей -- o(n), если не использовать хаки с приближенным количеством результатов. проверяет каждую запись, не удалена ли она
Что-то я сомневаюсь в том, что постгрес где-то хуже чем мускул.
источник

AP

Alex Peresmeshnik in Natural Language Processing
I Апрельский
Что-то я сомневаюсь в том, что постгрес где-то хуже чем мускул.
В обширности аудитории разве что. У мускула очень массовая, но в то же время более не образованная аудитория.
источник

I

I Апрельский... in Natural Language Processing
Любопытное обобщение. Возможно из-за популярности php и соотственно LAMP-стека это действительно так
источник

S

Serezha in Natural Language Processing
I Апрельский
Что-то я сомневаюсь в том, что постгрес где-то хуже чем мускул.
На count вполне может быть хуже и зависеть от режима изоляции транзакци. Коммент верный был :)
источник

I

I Апрельский... in Natural Language Processing
Ну может быть. Но без пруфов я все же не поверю)) Но мы понимаем, что целей убедить меня в чем-то ни у кого нет.
источник

YB

Yuri Baburov in Natural Language Processing
I Апрельский
Ну может быть. Но без пруфов я все же не поверю)) Но мы понимаем, что целей убедить меня в чем-то ни у кого нет.
Мне честно лень искать, поищи сам, пожалуйста :)
На 10м объектов у меня по несколько секунд count работал.
источник

RP

Ruslan Popov in Natural Language Processing
I Апрельский
Ну может быть. Но без пруфов я все же не поверю)) Но мы понимаем, что целей убедить меня в чем-то ни у кого нет.
Забей. Не умеют использовать, пусть верят в MySQL
источник

YB

Yuri Baburov in Natural Language Processing
Ruslan Popov
Забей. Не умеют использовать, пусть верят в MySQL
🤦‍♂️
а ещё на postgresql никто всё ещё не написал HandlerSocket с 750к RPS...
что тоже должно говорить умным людям, что ситуация с БД не чёрно-белое "PgSQL > MySQL".
источник

RP

Ruslan Popov in Natural Language Processing
у всех разные задачи, кому-то нужно 750К RPS, кому-то надёжное хранение больших данных, кому-то ещё что-то
источник

YB

Yuri Baburov in Natural Language Processing
Ruslan Popov
у всех разные задачи, кому-то нужно 750К RPS, кому-то надёжное хранение больших данных, кому-то ещё что-то
вот именно. кому-то быстрый count, кому-то быстрые операции со строковыми ключами, кому-то простой планировщик, кому-то сверхумный и рандомнокосячащий.
источник

I

I Апрельский... in Natural Language Processing
А как доканно связан с этими проблемами? Там у кого-то миллионы документов лежат? Чем смена постгреса должна помочь? Т.е. какой боттлнек при разметке мы таким образом обойдём?
источник

YB

Yuri Baburov in Natural Language Processing
I Апрельский
А как доканно связан с этими проблемами? Там у кого-то миллионы документов лежат? Чем смена постгреса должна помочь? Т.е. какой боттлнек при разметке мы таким образом обойдём?
я сначала неправильно понял объяснение, где было сказано, что после определённого объёма что-то не работает, поэтому и спросил про БД. моё предположение оказалось неправильным, конечно.
источник

RB

Radion Bikmukhamedov in Natural Language Processing
Futorio Franklin
В дукане беды с загрузкой датасета, максимум 1 мб
у меня такая же беда была, написал небольшой клиент для доккано, который батчами по несколько сотен может скачивать и закачивать
источник
2020 July 28

YB

Yuri Baburov in Natural Language Processing
Radion Bikmukhamedov
у меня такая же беда была, написал небольшой клиент для доккано, который батчами по несколько сотен может скачивать и закачивать
https://www.tecmint.com/limit-file-upload-size-in-nginx/
"By default, Nginx has a limit of 1MB on file uploads. " ...
источник

YB

Yuri Baburov in Natural Language Processing
Вот сюда надо добавить эту строчку:
https://github.com/doccano/doccano/blob/master/nginx/nginx.conf
источник

АК

Андрей Ключаревский... in Natural Language Processing
Привет! Знаете ли способ задеплоить модель с гугл колаба
источник

АК

Андрей Ключаревский... in Natural Language Processing
И другой не менее важный вопрос:) Есть ли сейчас библиотеки дающие человеческоподобные ответы на вопросы или подбирающие ответы скажем из выдачи гугла(не People Also Ask)? Задача мне как новичку кажется непростой
источник

I

I Апрельский... in Natural Language Processing
Андрей Ключаревский
И другой не менее важный вопрос:) Есть ли сейчас библиотеки дающие человеческоподобные ответы на вопросы или подбирающие ответы скажем из выдачи гугла(не People Also Ask)? Задача мне как новичку кажется непростой
источник