Там делов на пол часа
Зачем инструменты для этого

А вообще эта синхронизация полная дичь

Я подумал для этого

Тянуть на каждый чих либу ничем не лучше

А что апи не предоставляет возможность увеличить размер page выдачи?

И что по ограничениям кол-ва запросов в секунду

Max 100 а их там 3000

Может там что-то типа  динамодб, она кажется не предоставляет количество страниц

Адрес следующей страницы составляется из токена который приходит в странице

Мда дичевая фигня

Чтобы грабить ее

Рекурсивный промис какойто писать

Сама по себе метода будет долгая, получать аж 30 страниц.

Точно нет возможности предсказать указатель на следующую страницу?

Рандом token )

Ну тут ты ничего не сделаешь. Пока будешь грабить 30 страниц не исключено, что данные не раз и не два обновятся/сместятся и тд

Не критично это массив коментариев

Ну тогда, да, как писали выше, вложеный рекурсивный промис

Внутренний отрабатывает логику каждой новой страницы, внешний при получении окончательного результата. И самое главное нужно учитывать что данные могут сместиться, нужно делать проверку на пересечение чтобы не получить дублирование данных

всем привет, подскажите в чём беда.

Debug: internal, implementation, error
    TypeError: Cannot destructure property 'email' of 'request.payload.login' as it is undefined.
    at handler (C:\node-hapi-demo\routes.js:12:24)
    at exports.Manager.execute (C:\node-hapi-demo\node_modules\@hapi\hapi\lib\toolkit.js:60:33)
    at Object.internals.handler (C:\node-hapi-demo\node_modules\@hapi\hapi\lib\handler.js:46:48)
    at exports.execute (C:\node-hapi-demo\node_modules\@hapi\hapi\lib\handler.js:31:36)
    at Request._lifecycle (C:\node-hapi-demo\node_modules\@hapi\hapi\lib\request.js:365:68)
    at processTicksAndRejections (internal/process/task_queues.js:97:5)
    at async Request._execute (C:\node-hapi-demo\node_modules\@hapi\hapi\lib\request.js:274:9)

Пытаюсь сделать запрос на авторизацию https://gist.github.com/boriskrutskih/4f38b239b5bbd1e9c29f0b9b666699c8