さくらのクラウド と AWS EC2 を徹底的にベンチマークしてみた

さくらのクラウドは、さくらインターネットが提供する IaaS型のクラウドサービスです。さくらのVPSや専用サーバー、ハウジングしているサーバーとハイブリット接続できるのが大きな特徴とされています。そしてなんといっても魅力なのは、さくらのクラウドのキャッチコピーにもある「トラフィック課金なし、変わらない利用料金」です。とはいえ気になるのはやはりサーバーの性能ではないでしょうか？ そこで今回は、さくらのクラウドと AWS EC2 を「徹底的」にベンチマークして性能を比較してみました。

比較するサーバーのスペックと月額料金

月額料金は、どちらも東京リージョン2017年6月27日時点の料金概算です。

さくらのクラウド

• マシンタイプ：vCPU x 1 + メモリ 2GB
• ストレージ：SSD 20GB
• 月額料金：3,132円（サーバー：2,376円　ディスク：756円）
• インターネットへのデータ送信：無料

AWS EC2

• マシンタイプ：t2.small（vCPU x 1 + メモリ 2GB）オンデマンドインスタンス
• ストレージ：SSD 20GB
• 月額料金（ドル）：$25.76（730時間利用）（サーバー：$23.36　ディスク：$2.4）
• 月額料金（日本円）：2,885円（為替レート112円で計算）
• インターネットへのデータ送信：$0.14/GB

サーバーとディスク料金だけ見れば AWS EC2 が多少安いですが、インターネットへのデータ送信量が仮に月30GBだとすると、トラフィック課金は $0.14/GB×30GB×112円=470円 となり、合計すると 2,885円 + 470円 = 3,355円くらいになります。

このくらいのデータ送信量であれば問題ありませんが、これが10倍になるとトラフィック課金も10倍になりサーバーとディスク料金をはるかに上回ります。これが IaaS型クラウドサービスの一番怖いところだと思います(^^;)

ベンチマークテストの概要

以下のベンチマークテストを1時間ごとに行い、1日(24時間)の結果を比較します。各ベンチマークテストは、同じ時間帯に実行されないようにスケジュールしています。ベンチマークの詳細な手順はこの記事の後半「ベンチマーク設定手順」をご参照ください。

• CPU性能（UnixBench の System Benchmarks Index Score）
• Read ディスク性能（hdparm を10回実行した結果の平均値）
• Write ディスク性能（ddコマンドで512MBのデータを10回書き込んだ結果の平均値）
• MySQLのTPS「トランザクション毎秒」（SysBench の transactions の値）

ベンチマーク結果（サマリ）

記事が長くなりましたので、先に各ベンチマーク結果の平均値をまとめました。今回計測したサーバーのスペックでは、さくらのクラウドに軍配が上がりそうです。

ベンチマーク結果（詳細）

ベンチマークテストを実施した期間は 2017-06-26 07:00 〜2017-06-28 04:00 です。丸一日のデータがとれた6月27日のベンチマーク結果で比較します。

CPU性能（UnixBench）

定番のベンチーマークツール UnixBench の System Benchmarks Index Score です。この値が大きいほどCPUの性能が高いと言えます。

さくらのクラウドが AWS EC2 の３倍近くのスコアを出しています。

（System Benchmarks Index Score）

Read ディスク性能

SSDの読み取り速度、1回の計測値は hdparm（ディスクの読み取り性能を計測するためのコマンド）を10回実行した結果の平均です。

読み取り速度の平均値は、さくらのクラウドの方が早いですが、時間帯によって性能に多少のバラツキがあります。一方 AWS EC2 は下のグラフからも分かるように性能が一定です。いつ計測しても約80MB/秒の読み取り速度が出ています。

（単位：MB/秒）

Write ディスク性能

SSDの書き込み速度、1回の計測値はddコマンドで512MBのデータを10回書き込んだ結果の平均です。

ディスクの書き込み性能については、どちらも時間帯の違いによる性能のバラツキはありません。さくらのクラウドが　AWS EC2 の２倍以上の書き込み速度を出しています。

（単位：MB/秒）

MySQLのTPS（トランザクション毎秒）

MySQLのTPS（トランザクション毎秒）一般的にデータベース管理システムの性能はこのTPSで評価します。計測値は、SysBench の transactions の値です。

データベース管理システムの実行性能は、若干 AWS EC2 の方が良さそうです。

（単位：per sec）

ベンチマーク設定手順

さくらのクラウド と AWS EC2 どちらもまったく同じ手順で、ベンチマークを設定し計測しました。サーバーOSは CentOS7.3 (1611) です。

今回のベンチマーク結果ログ

はじめに、インストール済みのパッケージを最新版にアップデートし、開発ツールなど基本的なパッケージをインストールします。

ベンチマーク結果ログの保存先を作成

CPU性能（UnixBench）

UnixBench のインストール

・ベンチマーク実行スクリプトの作成
vi /usr/local/bin/unixbench.sh

#!/bin/sh -
LOG='/var/log/bench/unixbench.log'

cd /usr/local/bin/UnixBench
echo '==================== START ' `date` '====================' >> $LOG
./Run >> $LOG 2>&1
echo '==================== END ' `date` '====================' >> $LOG
echo '' >> $LOG

exit 0

実行権限を設定

・crontab に登録
crontab -e

Read ディスク性能（hdparm）

hdparm のインストール

・ベンチマーク実行スクリプトの作成
vi /usr/local/bin/io_read.sh

#!/bin/sh -
LOG='/var/log/bench/io_read.log'

#
# ディスクのデバイス名を指定
#
DISK='/dev/sda1'

echo '==================== START ' `date` '====================' >> $LOG
for i in `seq 10`
do
    echo 1 > /proc/sys/vm/drop_caches 
    /sbin/hdparm -t $DISK >> $LOG 2>&1
done
echo '==================== END ' `date` '====================' >> $LOG
echo '' >> $LOG

exit 0

実行権限を設定

・crontab に登録
crontab -e

Write ディスク性能（dd）

・ベンチマーク実行スクリプトの作成
vi /usr/local/bin/io_write.sh

#!/bin/sh -
LOG='/var/log/bench/io_write.log'
OF='/tmp/io_write'

/bin/mkdir $OF
echo '==================== START ' `date` '====================' >> $LOG
for i in `seq 10`
do
    /bin/dd if=/dev/zero of=${OF}/${i} bs=1M count=512 >> $LOG 2>&1
done
echo '==================== END ' `date` '====================' >> $LOG
echo '' >> $LOG

/bin/rm -r $OF
exit 0

実行権限を設定

・crontab に登録
crontab -e

MySQLのTPS（SysBench）

SysBench についての詳細は「SysBench で MySQL の性能測定（ベンチマーク）」をご参照ください。

SysBench のインストール

MySQL のインストールと起動

MySQL の初期設定

SysBench用のDBとユーザーの作成

計測用テーブルの作成

・ベンチマーク実行スクリプトの作成
vi /usr/local/bin/sysbench.sh

#!/bin/sh -
LOG='/var/log/bench/sysbench.log'

echo '==================== START ' `date` '====================' >> $LOG
/bin/sysbench \
--test=/usr/share/sysbench/tests/include/oltp_legacy/oltp.lua \
--db-driver=mysql \
--oltp-table-size=1000000 \
--mysql-password=＜パスワード＞ \
--num-threads=1 \
--max-requests=0 \
--max-time=300 \
--oltp-read-only=off \
run >> $LOG 2>&1
echo '==================== END ' `date` '====================' >> $LOG
echo '' >> $LOG

exit 0

実行権限を設定

・crontab に登録
crontab -e

以上で各ベンチマークテストが１時間ごとに実施され、結果が /var/log/bench/ ディレクトリ以下に出力されます。

（番外編）「さくらのVPS」はコスパ最強！

参考までに、さくらのVPS(v4)（vCPU x 3 + メモリ 2GB ＋ SSD50GB）のベンチマークも計測してみました。

CPUのコア数が多いので、System Benchmarks Index Score（さくらのVPSはマルチコアのスコアです）が高いのは当然ですが、ディスク性能がケタ違いに良いです。読み取り性能では10倍以上の性能を出しています。

ただし、さくらのVPSは数年に一度、ホストマシンの交換などにより数時間のサーバ停止をともなうメンテナンスが実施されることがあります。最近のメンテナンスでは平日の日中に２〜３時間の停止がありました。

このようなメンテナンス停止が許容できてクラウドにこだわる必要がなければ、クラウドサーバの半分の金額で倍以上の性能を得られるさくらのVPSがオススメです。