シャーディングは、レコードを複数のマシンに分割します。キーによって各レコードをどのマシンが持つかが決まるので、どのリクエストのコストが高くなるかもキーで決まります。顧客IDをハッシュすれば一般的な顧客は分散しますが、トラフィックが1つのパーティションの上限を超える単独の顧客は分割できません。Marlin Logsが抱えているのは、まさにその問題です。
平均の負荷だけでなく、最も大きいキーも確認してください。タイムスタンプの範囲で分けると、新しいイベントがすべて負荷の集中した1つのシャードに置かれることがあります。ランダムなサフィックスは書き込みを分散しますが、読み取りでは複数のパーティションを参照することになります。移行計画も必要です:新しいシャードに、古いレコードが自動的に入るわけではありません。アクセスパターンからパーティションキーを選び、その結果生じるクエリのファンアウトを明示し、移動中の再試行で重複が生じないようにレコードの識別子を安定させてください。