это библиотека компьютерного зрения, уже по скриншоту, можно проводить какие-то операции

Тогда Ctrl+S

Вот да. Только нужно в виде полноценного разработанного солюшна с копированием DOM-а.

С копированием должно быть очень просто с движка того же Cromium. Готового не видел.

Делал на коленке подобную штуку в дополнении к тулзе снимающей скриншоты с телефонов на Android.
Задача была по скриншоту понять что за пользователь и какие данные у него на скриншоте, результат в текстовом виде сохранить в базу.

В тупую даже коммерческий ocr не подошёл (abby). А вот Питон + opencv а за ним tessaract уже ок. Опенcv блоки хорошо ищет по картинке и разбивает на подкартинки которые уже скармливаются распознавателю текста.

Но у меня клиенты были с разными мобилами (разрешение телефона, шрифты разные), иногда страницы ниже/выше и тд были открыты. Отсюда сложности.

Посмотрите на puppeteer.

Хм.... Смотрю....

Ну в целом наверное да, но это если Ты либу для сторонних решений даёшь. У меня-то задача по работе со сложным интерфейсом собственной разработки. Я там хозяин и всё знаю. Зачем мне его склеивать в картинку, а потом расклеивать сложными алгоритмами?

Зачем полный dom? Достаточно версии фронта + данные всех форм?

если есть возможность по событию инициировать создание картинки из отрендеренной на клиенте страницы и передаче с ней текстом информации о странице, то тогда как у меня упражнения не нужны. У меня контроля над приложением не было.

С готовыми плагинами для браузера не знаком, но это было бы интересным решением. Чтобы и скриншот сделать и техническую информацию собрать и передать.

В целом да, но какие-то доп данные всё-равно потребуются.

а на чём фронт? Если что-то с redux, то достаточно слепок хранилища + вызываемые редьюсеры

Там старьё старше всех нас вместе взятых в этом чате.

Чуть ли не под netscape4.1 писали

Тут есть кто-то, кто помнит, что это?

да как же его можно забыть)

Есть есть ))

Поднимаю за вас кружку пива, парни!

В крайнем случае можно и под него обойти дом и послать что вышло на удалённый сервер. Обернуть ловлю событий в свою функцию и присылать дополнительно "какие действия сделал пользователь"

А я портера бокал