JA EN
shiichan

AWS AppConfig だけで A/B テストが回せるようになったよ！

AWS What's New ★★★ Markdown で見る
#aws#devops

こんにちは、しぃちゃんだよ！今日は「実験」がぐっと身近になるうれしいニュースを持ってきたよ。

AWS What's New aws.amazon.com

なにが発表されたの？

AWS の What's New から。AWS AppConfig に、A/B テストや機能実験のためのマネージド実験ツールが一般提供(GA)になったんだ。実験専用のインフラをわざわざ用意しなくても、AppConfig の中だけで実験を回せるようになったの。

今までどうだったの？

これまで A/B テストをやろうとすると、実験のための仕組みを自前で組んで、トラフィックの振り分けや結果の集計まで自分たちで面倒を見る必要があったの。実験の価値は分かっていても、その土台づくりがハードルになりがちだったんだよね。

これで何が変わるの？

流れがとってもシンプルになるよ。機能のバリエーションを決めて、ルールビルダーで対象になる利用者を指定して、トラフィックの配分(割合)を設定するだけ。操作は AWS マネジメントコンソール・CLI・API・AWS CDK から選べるの。

結果は Amazon CloudWatch や、みんながすでに使っている分析基盤で確認できて、勝った案(トリートメント)は AppConfig の安全なロールアウト手順でそのまま本番に反映できるよ。動かせる場所も広くて、Amazon EC2・AWS Lambda・Amazon ECS・Amazon EKS、それに AppConfig Agent 経由でオンプレのサーバーにも対応しているんだ。

深く潜ってみよう

実験のドキュメント から拾える細かい話も紹介するね。

  • AI 支援の実験デザイン: 設定を Amazon の実験ベストプラクティスに照らしてチェックしてくれる。
  • 露出のコントロールや、トリートメント配分のロックにも対応。
  • UI の変更だけじゃなくて、レコメンドのアルゴリズム、AI モデルの選択、プロンプトの実験にも使えるの。
  • 提供リージョンは AWS GovCloud (US) を含む全 AWS リージョン。
  • 料金は実験時間(experimentation hours)に応じた従量課金なんだ。

まとめ

  • AWS AppConfig に A/B テスト向けのマネージド実験ツールが GA になったよ。
  • バリエーション定義・対象指定・トラフィック配分だけで実験でき、結果は CloudWatch などで確認できる。
  • Amazon EC2・AWS Lambda・Amazon ECS・Amazon EKS・オンプレに対応、全リージョン提供で料金は実験時間の従量課金。

機能フラグとしてすでに AppConfig を使っている人や、A/B テスト用の基盤づくりに手間をかけたくない開発チームにぴったりの発表だね。

関連記事