Webサービス/負荷試験

• 人気の負荷試験（負荷テスト）ツールを調べてみる（Locust, Vegeta, wrk）

• Webサイト負荷テストの定義と改善　～便利なツール集付き～
• 負荷テストのポイント
• Web負荷テストツールまとめ

k6 †

• k6 - github

• k6でシナリオ作成するときにハマったこと
• モダンな負荷テストツールのk6を試してみた
• k6を使って負荷テストをやってみる
• k6の使い方 シンプル&軽快な負荷試験ツールを試す
• TypeScriptで負荷シナリオテストを作りたくなった話
• k6を使うと負荷テストのパフォーマンス計測が捗る話
• k6でシナリオベースの負荷テストを試してみる
• Load Impact/k6 を使用した負荷試験の実施

• k6 - Datadog

概要 †

• k6はGoで開発されたモダンな負荷試験ツール
• 軽快なフットワークでインストールが可能
• JavaScriptで書いたシナリオを実行する形で利用
• 試験結果は様々な外部システムと組み合わせることが可能

必要スペック †

• Running large tests
  • Simple tests will use ~1-5MB per VU. (1000VUs = 1-5GB)

• ネット上の情報
  • 26000人～29000人分のアクセスを再現するあたりで64GBのメモリを使い切り動かなくなった
  • 1000人オーダーであれば8～16GBのメモリのマシンであっても耐えられそう
  • メモリに余裕のない環境ではマシンスペックの限界を超えたときにGoのランタイムエラーが出力される

計測項目 †

• http_req_blocked
• http_req_connecting

• http_req_sending
• http_req_waiting
• http_req_receiving
• http_req_duration ... http_req_sending + http_req_waiting + http_req_receiving

• http_req_failed

• http_req_tls_handshaking

JavaScript対応状況 †

• JavaScript Compatibility Mode

• k6オプション
  • --compatibility-mode=base ... ES5.1+
  • --compatibility-mode=extended ... ES2015(ES6)+

• ES6対応
• 但し、k6は実行時に内部でES6からES5に変換している
• --compatibility-mode=base オプションをつけるとその処理が省かれるので、省コストで実行されるようになる
• なので、最初からES5ベースで記述するか、ES6ベースで記述したものをツールで変換すると良い

インストール †

• Installation

InfluxDB †

• InfluxDB + Grafana
• K6の負荷テスト結果をGrafana+InfluxDBで可視化する

• InfluxDB（DBは k6）に結果出力

  k6 run test.js --out influxdb=http://localhost:8086/k6

Redisとの連携 †

• 前の実行結果を使って処理する際に便利！
• 但し、DBは 0 固定か？
  • 2021/9現在。DB指定できるようにドキュメントに書いているが、実際 DB:1 を指定しても DB:0 にデータが登録されている。

• Goをインストール
• git をインストール
  • Windows版
• xk6 をインストール
• xk6-redis に従い、ビルド

SSL †

• SSL/TLS - k6
• Disable SSL certificate verification

k6 Documentation †

• get( url, [params] )
• post( url, [body], [params] )
• Response

k6/metrics †

• Rate
• Trend

k6関連プロジェクト †

• k6-hardware-benchmark

トラブルシューティング †

• Error Codes

hint="script exception" †

その他 †

hey †

Apache JMeter †

• Jmeter のインストールから負荷テストまで
• JMeter 3.2をWindows 7にインストールして起動
• WindowsからJMeterでHTTPリクエストする最低限の手順まとめ
• Apache Jmeter - マイクロソフト系技術情報 Wiki

• 【図解】はじめてでもわかるJMeterの使い方

• JavaでできているためOSに依存せず、JavaがインストールされているWindows、Mac OSX、Linuxなどで実行可能

Siege †

• Siegeによる負荷テストでWebアプリをスケールさせる方法
• Siege を使って WebAPI の負荷テストを実施する

Vegeta †

• HTTP/HTTPSリクエスト向け負荷テストツールのVegetaがとても良かった

Apache Bench †

httperf †

WCAT †

• 【ワレコのIIS】無償の簡易 Web 負荷ツール WCAT って言うのを使ってみた

fwptt †

Web ApplicationStress? Tool †

• MS Web Application Stress ツール

• 提供終了となっている。それなりに使えたのに残念。
• 後継はWCAT

NeoLoad †

WebLOAD †

Flood †

• Floodを使ってみる

VSTT †

• VSTTのWebテスト機能でアプリケーション品質を強化する: VSTTのWebテスト機能でアプリケーション品質を強化する

MySQL用 †

• mysql と drizzle の負荷テストツール「skyload」が凄い！