中級読了 4 分

DynamoDB オンデマンド vs プロビジョンドキャパシティ

DynamoDB はスループットを 2 通りに課金します。オンデマンドはリクエストごとに課金するので、アイドル状態のテーブルのスループット料金はゼロです(ストレージは引き続き課金されます)。

プロビジョンドは、使っても使わなくても支払う固定の読み取り/書き込みレートを、はるかに低い単価で予約します。誤ったほうを選ぶのは、払いすぎる最も簡単な方法の 1 つです。

例には、マルチテナント SaaS の追記専用の監査ログを使います。イベントごとに小さなアイテムが 1 つで、テナントごとにパーティション分割されています。設定は運用とコストの概要のとおりです。

その書き込みは急増的です。夜間は静かで、顧客が一括操作を実行したりインシデントが数千件のイベントを生んだりすると洪水になります。

DynamoDB はオンデマンドとプロビジョンドキャパシティのどちらを使うべきですか?

  • オンデマンド = リクエストごとに課金。 計画すべきキャパシティはなく、読み取り/書き込みの単価は高いですが、トラフィックが発生したときにだけ支払います。新しいテーブルや急増するテーブルには安全なデフォルトです。
  • プロビジョンド = 安定したレートを予約し、常に支払う。 us-east-1 の定価では、プロビジョンドしたキャパシティの平均 約 29% 超を使うなら安くなります。それを下回ると、遊休キャパシティに支払っていることになります。
  • 安定して予測可能で大量のトラフィックにはプロビジョンドが向きます。通常はオートスケーリングと併用します。
  • モードは切り替えられますが、非対称です。 プロビジョンドからオンデマンドへの切り替えは、直近 24 時間あたり 4 回までに制限されます。オンデマンドからプロビジョンドへは無制限です。

問題: 使わないキャパシティに払う

プロビジョンドキャパシティでは、たとえば毎秒 2,000 書き込みユニットにコミットします。監査ログが平均で毎秒 50 書き込みでも、インシデント日のピークに合わせてプロビジョンすれば、24 時間ずっと 2,000 分を支払って、その 40 分の 1 しか使いません。

代わりに平均に合わせてプロビジョンすると、インシデント日の洪水はスロットリングされます。書き込みが拒否されるのです。

つまり固定キャパシティは、急増するトラフィックに悪いトレードを強います。常に払いすぎるか、プロビジョンを抑えて最も肝心なときに書き込みを落とすかです。オンデマンドはそのトレードを取り除きます。

2 つのモードの仕組み

オンデマンドは、消費した読み取り・書き込みリクエストユニットに課金し、設定すべきキャパシティはありません。

AWS は "instantly accommodates up to double the previous peak traffic on a table" とし、 30 分以内に直前のピークの 2 倍を超えるとスロットリングが起こり得るとしています。

ある計測では、新しいテーブルが 4,000 書き込み/秒を処理し、 8,000/秒を投入すると依然としてスロットリングしました。その伸縮性の代わりに、リクエストごとに割増しを支払います。

プロビジョンドは、毎秒あたりの読み取りキャパシティユニット(RCU)と書き込みキャパシティユニット(WCU)の数を予約します。単価ははるかに低いですが、使っても使わなくても予約に継続的に支払います。

それを超えると、DynamoDB はまずバーストキャパシティを使います。これは蓄えておいた最大 5 分間分の未使用キャパシティです(ベストエフォート)。それを使い切ると、オートスケーリングがテーブルを拡大していない限りリクエストはスロットリングし、オートスケーリングは数分かけて反応します。

スパイキー / 不明 / 新規安定していて予測可能バーストありトラフィックの形は?オンデマンドプロビジョンド+ オートスケーリング

損益分岐点はどこか

us-east-1 の定価で 1 WCU は 1 時間あたり $0.00065 で、使用率 100% なら、その 1 時間に 1 KB の書き込みを 3,600 回処理します。

同じ 3,600 回の書き込みはオンデマンドでは 3,600 × 100 万あたり $0.625 = $0.00225 です。プロビジョンドは、平均でその 0.00065 / 0.00225 = 28.9% 超を使うなら安くなります。読み取りも同じ比率になります。

プロビジョンドキャパシティの平均使用率プロビジョンド vs オンデマンド(リクエストあたり)
100%約 3.46 倍安い
70%約 2.4 倍安い
50%約 1.7 倍安い
約 29%損益分岐点
約 29% 未満オンデマンドのほうが安い

使用率は CloudWatch で 1〜2 週間かけて計測します。ConsumedWriteCapacityUnits と ConsumedReadCapacityUnits を 1 分ごとの Sum 統計で取り、60 で割ると毎秒あたりのユニット数になります。

Average 統計は使わないでください。これは毎秒あたりではなく、リクエストあたりの平均です。 1 分未満のスパイクは平均化されるため、最も忙しい 1 分間の値はピークの下限です。これらの数字は無料利用枠とリザーブドキャパシティを含みません。

具体例: 監査ログの請求

監査ログは平均で毎秒約 50 イベントを書き込み、インシデント時には約 2,000/秒まで急増します。各イベントは 1 KB 未満なので、書き込み 1 回は 1 書き込みユニットです。

読み取りはまれです(コンプライアンスのエクスポート、たまの調査)。us-east-1 の定価で、730 時間の月の書き込みについて(1 WCU 月は $0.00065 × 730 = $0.4745):

構成月額の書き込みコストテナント全体に分散した 2,000/秒のバーストで起きること
オンデマンド131.4M 書き込み × $0.625/M = $82.13吸収される: 新しいオンデマンドのテーブルは既に 4,000 書き込み/秒を処理する
ピークでプロビジョン、2,000 WCU2,000 × WCU 月あたり $0.4745 = $949.00吸収される
平均でプロビジョン、50 WCU50 × WCU 月あたり $0.4745 = $23.73バーストキャパシティが約 8 秒をカバーし、その後書き込みがスロットリングする

ピークに合わせてプロビジョンすると使用率は 2.5% で、損益分岐点を大きく下回り、オンデマンドの請求の 11 倍以上かかります。

平均に合わせてプロビジョンするのが最も安いですが、インシデント中に監査の書き込みを落とします。失うには最悪のタイミングです。このワークロードにはオンデマンドが正しいデフォルトです。

「吸収される」の行は、多くのテナントに分散したインシデントを前提にしています。1 人の顧客の一括ジョブは違います。すべてのイベントが TENANT#acme に入り、1 つのパーティションはどちらのモードでも最大 1,000 書き込み/秒しか受け付けません。

ソートキーは時間とともに増加するため、アダプティブキャパシティはそのテナントのイベントをパーティション間で分割できません。1,000/秒を超えると、テーブルにどれだけキャパシティがあってもジョブはスロットリングします。

解決策は、負荷の高いテナントのパーティションキーをシャーディングすることです。4 つのシャード(TENANT#acme#0 から #3)にすれば、2,000/秒のジョブはキーあたり約 500/秒になります。時間範囲を読み戻すには、シャードごとに 1 回の Query を実行して結果をマージします。

サフィックスの選び方と読み戻しについてはホットパーティションで扱っています。

急増が来ると分かっているなら(ローンチや一括インポート)、 aws dynamodb update-table --table-name audit-log --warm-throughput WriteUnitsPerSecond=N でテーブルを事前にウォームアップします。詳細は計測したスループットのガイドにあります。

下のスライダーを動かして、水平なプロビジョンドの線と右肩上がりのオンデマンドの線が交わる場所を確かめてください。

オンデマンド対プロビジョンド: コストと使用率
1,000 /s
1,000 /s
20 %

平均使用率 20% のとき: 月額でオンデマンド $394.20、プロビジョンド $569.40。

プロビジョンドピークの平均使用率が 28.9% を下回るとオンデマンドが安く、上回るとプロビジョンドが有利です。

使用率オンデマンドプロビジョンド割安
10%$197.10$569.40オンデマンド
25%$492.75$569.40オンデマンド
28.9%損益分岐点$569.40$569.40—
50%$985.50$569.40プロビジョンド
75%$1,478.25$569.40プロビジョンド
100%$1,971.00$569.40プロビジョンド

料金: 米国東部 (バージニア北部)、強い整合性のある読み取り、無料利用枠なし。リクエストコストのみ — ストレージはどちらのモードでも同じ料金で課金され、損益分岐点を動かすことはありません。 ピーク: 読み取り 1,000 回/秒、書き込み 1,000 回/秒、アイテムサイズ 1 KB。

任意の単一リージョンで、無料利用枠を適用して自分の数値の料金を見積もるには、 DynamoDB 料金計算ツールを使ってください。

DynoTable でやってみる

キャパシティの決定には 3 つの数値が必要です。アイテムの大きさ、アイテムの数、そして書き込みの速さです。レートは上記の CloudWatch メトリクスから得られます。

サンプルのイベントを、それが消費する RCU/WCU に変換するには、アイテムサイズ計算ツールにかけましょう。

DynoTable では、テーブルのツールバーにある 設定 ボタンで「テーブル設定」ダイアログが開きます。その 概要 には DynamoDB のアイテム数とサイズの推定値(約 6 時間ごとに更新)が表示され、設定 セクションでキャパシティモードを切り替えられます。

DynoTable で監査ログのテーブルを閲覧している様子。「テーブル設定」ダイアログのアイテム数とサイズの推定値が、キャパシティモードの決定への入力になる。
DynoTable で監査ログのテーブルを閲覧している様子。「テーブル設定」ダイアログのアイテム数とサイズの推定値が、キャパシティモードの決定への入力になる。

落とし穴と次のステップ

  • モードの切り替えにはレート制限がある。 1 日のうちに何度も切り替えるのではなく、オンデマンドへの切り替えは計画的に行いましょう。
  • オートスケーリングは即時ではない。 数分かけて反応するので、プロビジョンドでの鋭いスパイクは、バーストキャパシティを使い切るとスロットリングし得ます。バースト的なトラフィックには、ピークの 2 倍という上限の範囲内で、オンデマンドのほうがスパイクをうまく処理します。
  • ホットパーティションはどちらのモードでもスロットリングする。 パーティションごとの上限はオンデマンドにも適用されるため、偏ったキーは、テーブルのキャパシティに余裕があるように見えてもスロットリングし得ます。CloudWatch Contributor Insights でキーを見つけて分散させましょう。ホットパーティションを参照してください。
  • はそれ自身のキャパシティを持つ。 各インデックスは別々に課金され、プロビジョンが不足するとベーステーブルの書き込みをスロットリングし得ます。 GSI がベーステーブルの書き込みをスロットリングする理由を参照してください。

プロビジョンドを選ぶなら、次のステップはそのオートスケーリングの設定です。

DynoTable をダウンロードして、テーブルのサイズとアイテム数の推定値を読み取り、キャパシティモードを切り替えましょう。

著者: Dmitriy · 更新日