AB
а какая задача ?
Size: a a a
2020 July 09
KZ
а какая задача ?
Сейчас есть скрипты в ноутбуках, которые используют аналитики, их нужно упаковать для использования через web-интерфейс
KZ
Фронтовая часть делается с нуля, вот с бэком пока что разбираюсь
RS
API будет делать инференс? Какой-то пре/пост процессинг?
KZ
API будет делать инференс? Какой-то пре/пост процессинг?
Какую-то обработку, да, но в целом нужен как посредник между данными и запросами в другую апишку, грубо говоря для загрузки файлов для обработки и получения файла обратно
RS
Если брать Python, то можно сделать API на базе FastAPI - и получить спеку OpenAPI и валидацию по ней
KZ
Если брать Python, то можно сделать API на базе FastAPI - и получить спеку OpenAPI и валидацию по ней
Интересно, про FastAPI слышал 👍
N
Если брать Python, то можно сделать API на базе FastAPI - и получить спеку OpenAPI и валидацию по ней
++
RS
Если это просто посредник, то можно и на Golang сделать
KZ
Если это просто посредник, то можно и на Golang сделать
Понял, сейчас больше опыта на Python
AB
Если брать Python, то можно сделать API на базе FastAPI - и получить спеку OpenAPI и валидацию по ней
советую не использовать asyncio и маштбаироватся процессмами
KZ
советую не использовать asyncio и маштбаироватся процессмами
Про asyncio интересный совет, нужно будет как-нибудь обсудить 🙂
KZ
Думал, что сейчас многие используют asyncio
N
советую не использовать asyncio и маштбаироватся процессмами
Смотря сколько данных перегонять и что с ними в процессе делать
S
Про asyncio интересный совет, нужно будет как-нибудь обсудить 🙂
ну дык asyncio из-за GIL он для CPU bound Задач ну вообще не упирается
Саша правильно советует =)
Саша правильно советует =)
S
Смотря сколько данных перегонять и что с ними в процессе делать
да даже если просто csv в json конверить.. но много и массово и это именно batch pipeline а не по API запросы фигачить...
RS
Тут уже на вкус и цвет - делал инференс с интеграцией с RabbitMQ - здесь полнодуплексный протокол, асинхронность как раз была к месту.
N
"Масштабироваться процессами" - это, банально, "использовать uwsgi", например :)
N
да даже если просто csv в json конверить.. но много и массово и это именно batch pipeline а не по API запросы фигачить...
Я бы такое, честно сказать, писал на го. Он для этого очень хорошо подходит
AB
"Масштабироваться процессами" - это, банально, "использовать uwsgi", например :)
хорошая идея в нем есть встроеная очередь можно не ставить rabbit