今日のインターネット時代では、安定性はすべてのシステムとアプリケーションにとって重要な要素です。大規模なデータ センターであっても、パーソナル コンピュータであっても、安定性は通常の動作とユーザー エクスペリエンスを確保するための基礎です。これに関連して、バージョン 2.1.0 でメモリの複数コピーの概念を導入したオープン ソースのベクトル データベースである Milvus について話しましょう。
Milvus は、主に大規模な類似性検索とベクトル演算に使用されるオープンソースのベクトル データベースです。強力な並列処理機能を提供し、大規模なデータ クエリと操作をサポートできます。バージョン 2.1.0 で、Milvus はメモリの複数のコピーという新機能を導入しました。この機能により、ユーザーは複数のコピーを通じてシステムの QPS (1 秒あたりのクエリ レート) を向上させることができます。
メモリの複数のコピーは、システムの安定性と可用性を向上させる一般的な方法です。異なる物理ノード上にデータの複数のコピーを作成すると、ノードに障害が発生したりオフラインになった場合でも、サービスの通常の動作を保証できます。同時に、負荷分散アルゴリズムを通じてリクエストを各コピーに均等に分散し、単一ノードに過剰な負荷がかかり、システムのパフォーマンスが低下することを回避します。
ただし、この新しい負荷分散戦略も実際の適用ではいくつかの問題に遭遇します。主な問題は、コピーを追加した直後には QPS が増加しないことです。これは、レプリカの追加にはデータの同期に時間がかかり、場合によってはデータの量が多すぎると同期プロセスが遅くなる可能性があるためです。さらに、ノードがオフラインになると、システムが安定した状態に戻るまでに長い時間がかかります。これは、ノードがオフラインになった後、負荷を再分散する必要があり、このプロセスにより多くの時間とリソースが消費される可能性があるためです。他にもいくつかあります