Elasticsearchのネイティブなページネーション手法（from/sizeなど）は、深いページでは大量の結果セットを取得して破棄する必要があるため、非常に遅くなります。本記事では、vivoのインターネットサーバーチームによる新しいソリューションを紹介します。このアプローチでは、3段階の最適化を採用しています。第1段階は、セグメントベースのRedisキャッシュの事前ウォーミング。第2段階は、search_afterと組み合わせた最近接アンカーポイントの位置特定。第3段階は、マルチレベルアンカーキャッシュ戦略です。重要な洞察は、一定間隔（例：1000ドキュメントごと）でアンカーポイントをキャッシュし、search_afterを使用して最も近いキャッシュされたアンカーにジャンプし、そこから正確なページまで前方スキャンすることです。これにより、深いスクロールのオーバーヘッドを回避しながら、任意のページジャンプをサポートします。記事には、キャッシュ無効化戦略やメモリ考慮事項などの詳細なパフォーマンスベンチマークとトレードオフが含まれています。大規模な検索やログ分析を扱うエンジニアリングチームにとって、速度、一貫性、リソース使用量のバランスを取った本番環境対応のパターンを提供します。
本記事では、vivoのインターネットサーバーチームによる、Elasticsearchの深いページネーションで任意のページジャンプを可能にする3段階の最適化について詳述しています。search_afterとRedisマルチレベルアンカーキャッシュを組み合わせたソリューションにより、クエリ時間を10分から1秒に短縮します。深い結果セットへのランダムアクセスが必要な本番環境向けの実用的でスケーラブルなアプローチを提供します。