Amazon・Google・Microsoftのクラウドのパフォーマンスを比較した2022年度クラウドレポートが公開される

商用データベース管理システムを開発するソフトウェア企業のCockroach Labsが、クラウドのパフォーマンスをベンチマークで比較した「2022年度クラウドレポート」を公開しました。

2022 Cloud Report | Cockroach Labs
https://www.cockroachlabs.com/guides/2022-cloud-report/

Cockroach Labsは2017年以降毎年クラウドのベンチマークテストを実施してきましたが、2022年度はユーザーからの質問が多かった「小規模だが数が多いノードと大規模だが数の少ないノードのどちらを使用するのが良いのか」に焦点を当てて調査したとのこと。そこでAmazon Web Services(AWS)、Google Cloud Platform(GCP)、Microsoft Azureの3つのクラウドサービスで、OLTPパフォーマンス、CPUパフォーマンス、ストレージI/Oパフォーマンス、ネットワークパフォーマンスという主に4つの軸でベンチマークテストが実施されました。

まずは各クラウドサービスで採用されているインスタンスタイプのOLTPパフォーマンス比較です。大規模インスタンスタイプでは、AMD Milanプロセッサーを搭載したGCP t2d-standard-32がトップに。2位にIntel Ice Lake搭載のn2-standard-32、3位にAWS m6i.8xlargeが付けています。

小規模インスタンスタイプでもやはりt2d-standard-32がトップに。2位がm6i.2xlarge、3位がn2-standard-8という結果になりました。

なお、Cockroach Labsは「OLTPパフォーマンスを基準にすると、3つのクラウドサービスのどれを選んでも、価格対性能比で競争力のあるソリューションを得られる」としています。以下グラフの赤がGCP、青がMicrosoft Azure、オレンジがAWSで、各色の濃色がリザーブド、淡色がオンデマンドを表しています。価格はTPMあたり、年間契約での価格です。

次にCPUパフォーマンスの結果が以下。1位がGCP t2d-standard-8、2位がGCP t2d-standard-32、3位がMicrosoft Azure standard_E8as_v5という結果となり、上位5位までをAMD Milanが独占しました。

ストレージパフォーマンスの結果が以下。左側が小規模インスタンス、右側が大規模インスタンスで、IOPSの中央値が書き込み(濃色)と読み込み(淡色)別に示されています。Cockroach Labsは「これらのストレージオプションのすべてにおいて、少なくともスペック通りの性能は得ることができた」と評しました。

また、比較的少量の永続ブロックストレージであっても、特定のワークロードの実行コストはインスタンスのコストよりもストレージのコストの方がはるかに大きな影響を与えるとのこと。ワークロードが非常に多くのIOPSや非常に低いレイテンシを必要としない限り、中層のストレージオプション(GCP pd-ssdやMicrosoft Azure premium-disk)を選択することが望ましいとCockroach Labsは述べています。

ネットワークパフォーマンスでは、各インスタンスタイプのクロスリージョンネットワークにおけるスループットを1回実行した場合の平均コストなどが測られました。以下グラフでは、AWS、GCP、Microsoft Azureで各12分間実行した際のパフォーマンスおよびコストが示されています。Cockroach Labsは「パフォーマンスとコストの両面でGCPが総合的に優れていた」と評価しました。加えて、これらのコストはインスタンス自体のコストよりも大きく総コストに影響を与える可能性があるため、将来的にはこのような「隠れたコスト」の分析を深めるとも述べました。

最後に、小規模・大規模インスタンスのどちらが優れているのかという問いに対し、Cockroach Labsは「vCPUあたりのTPMでみると、小規模インスタンスの方が大きく上回る」という答えを示しました。OLTPとCPUのベンチマークでテストしたところ、上位10インスタンスのうち8つが小規模インスタンスとなり、総合性能、平均性能ともに大規模インスタンスに勝るという結果になっています。