Добрый день есть тестовый индекс на 5 млн документов требуется пагинация. Причем хочется именно все 5 млн разбить на страницы. В документации рекомендуют избегать пагинации т.к. это большая нагрузка особенно если кластер. Есть ли способы улучшить производительность куда смотреть ?
Вы ожидаете, что какой-то пользователь пройдет по всем этим страницам?
Да именно так.
Как минимум это будет поисковый бот.
В целом пользователи сейчас смотрят и середину и хвост категорий для чего не понятно, но смотрят.
Это классический симптом плохого поисковый интерфейса. Ваши пользователи не могут разобраться как им ограничить количество документов, которые вы им возвращаете. Если смотрят в конец - значить у вас сортировка не понятно как работает, а если в середину - значить фильтры или фасеты не очевидны. Возвращая миллионы записей вы пытаетесь решить "неправильную" проблему.