так речь именно про in-memoery 🙂 он жутко тупит

речь про событийную базу данных на которую нагрузка может быть действительно крайне высока

Я пришел к мысли, что если надо столько - проще поставить h2o и нарисовать spsc между ним и гошным app server

так не интересно что всем объясняешь как это всё неважно 🙂

😉

А потом к тебе прибегает толпа ботов вместе с реальными людьми и ты не можешь их классифицировать, потому что некогда

Батчинг наше все

Это грустная реальность

Что fail2ban? Тебе чтобы принять решение, надо обслужить запрос.

Подскажите, пожалуйста, в jetbrains idea не скачиваются указанные в импорте библиотеки с github
при этом стандартные пакеты работают нормально.
в консоли

github.com/klauspost/compress (download)
# cd /Users/ikozlov/go/src/github.com/klauspost/compress; git pull --ff-only
There is no tracking information for the current branch.
Please specify which branch you want to merge with.
See git-pull(1) for details.

    git pull <remote> <branch>

If you wish to set tracking information for this branch you can do so with:

    git branch --set-upstream-to=origin/<branch> master

package github.com/klauspost/compress/flate: exit status 1
package github.com/klauspost/compress/gzip: cannot find package "github.com/klauspost/compress/gzip" in any of:
 /usr/local/go/src/github.com/klauspost/compress/gzip (from $GOROOT)
 /Users/ikozlov/go/src/github.com/klauspost/compress/gzip (from $GOPATH)

fail2ban против ботов, ты сделал мой вечер.

И вот у тебя боты ходят с адреса в который натятся все абоненты мобилок Билайна в твоём регионе. Банишь этот адрес - прощай Билайна. потом атакующий обходит всю большую тройку

Да, и?

и земля тоже плоская 😊

если я могу уменьшить latency и в данном задании мне HTTP/2 и полная спека HTTP не требуются - нет смысла брать net/http который на каждый чих аллокейтит памяти

Просто в тему детектирования ботов вложено очень много сил и тут ты на белом коне

fail2ban это просто регекспы, где на каждый матч ты кидаешь ip в дроп. Это замечательно работает когда тебе нужно дать отлуп бруту по порту. Но когда к тебе летит ~60k rps аналитического трафа скликивания банеров, то ты никак не отсеишь 1% фрода.

Сделай ipc через shm

нужен HTTP 🙂

🤷‍♂