AutomatedTesting.aiとは何か、どのように動作するか
サイトを訪れると、無駄のないすっきりとしたランディングページが表示され、「These Tests Write Themselves!」と即座に核心を突いたメッセージが目に飛び込んできます。AutomatedTesting.ai(「アタイ」と発音)は、Vision AIを使用してプレーンな英語のプロンプトから自動テストケースを生成するツールです。体験の中心となるのはSprucebotです。これは、生成AIそのものではなく、AIモデルを管理するデジタルアシスタントです。
ワークフローは驚くほどシンプルです。テストしたい内容、成功基準、エッジケースを記述します。次に「Build Test Steps」を押すと、SprucebotがアプリをビジョンAI優先でスキャンし、テストステップを作成します。その後は、AIを介さずにこれらのステップを繰り返し実行できるため、実行コストはほぼゼロになります。特に気に入ったのは「Ride Alongs」機能です。Sprucebotがリアルタイムでテストを構築する様子を確認でき、軌道から外れた場合は停止できます。
調査中に、AtaiがSpruce Development Platform(TypeScript、Node、WebSocket、MongoDB)上に構築されていることに気付きました。スタックはモダンで、ライフタイムライセンスにソースコードが含まれているのは珍しい特典です。FAQによると、これを構築したのはたった2人のフルタイムエンジニアと1人のパートタイムテクニカルライターです。つまり、ブティック製品ですが、アーキテクチャは明確に考え抜かれています。
価格とライセンス:驚くほど正直なモデル
ここでの最大の差別化要因の一つが価格設定です。2つのオプションがあります。
- Download for Life – 99ドル(一回限り、Macのみ)。フルソースコード、開発者向けドキュメント、機能アップデートが含まれます。すべてをローカルで実行します。
- Cloud Subscription – 月額19ドル。Sprucebotをクラウドで実行しますが、スクリーンショット保存用にご自身のOpenAIキーとS3バケットを提供する必要があります。
コストパススルー方式が、このプラットフォームを非常に手頃な価格に保っています。ツール代は支払いますが、AIトークンはご自身のOpenAIアカウントを通じて別途支払います。FAQには「AIが役立つ場面ではAIを、そうでない場面ではエキスパートシステムを使う」と明確に説明されています。テストステップが生成されると、それらはPuppeteerスクリプトとして保存され、追加のAI費用なしで実行されます。これは、テスト実行ごとに課金したり、AI推論コストを含むサブスクリプションを要求することが多いTestimやMablなどの競合製品とは対照的です。予算に制約のあるチームにとって、このモデルはゲームチェンジャーです。
とはいえ、制限もあります。99ドルのライフタイムダウンロードはMacのみ利用可能で、ソフトウェアを公開ホストすることはできません。WindowsやLinuxが必要な場合は、待つかクラウドサブスクリプションを利用する必要があります。また、クラウドプランでも、ご自身でS3バケットとOpenAIキーを管理する必要があり、セットアップに少し手間がかかります。
長所と短所:有効な点と課題
AutomatedTesting.aiの最大の強みは、そのユニークなアーキテクチャです。テスト生成とテスト実行を分離することで、多くのAIテストツールが抱える「ベンダーロックイン」を回避しています。一度ステップを生成すれば、その後はPuppeteerを使ってローカルで実行するだけなので、AIコストは発生しません。そのため、頻繁に実行されるプロジェクトや大規模なスイートに最適です。
その他の強力な機能としては、Test Repairs(UI変更時にSprucebotがテストを修正)、Dummy Data / Dummy Users(設定可能な変数と認証情報)、そしてテストの実行をリアルタイムで監視できる機能があります。テストケースとスイートが無制限なのもボーナスであり、ライフタイムプランでソースコードにアクセスできるのは、パワーユーザーやセキュリティ意識の高いチームにとって貴重な特典です。
ただし、このツールには欠点もあります。現時点ではOpenAIのVisionモデルのみをサポートしており、他のAIバックエンドをプラグインすることはできません。チームは非常に小規模(エンジニア2名)であるため、アップデート頻度やサポート対応時間に影響が出る可能性があります。セルフホスト版が「Macのみ」であることは、WindowsやLinuxの開発者にとって大きな障壁です。また、公開ホストは許可されていないため、クラウドサブスクライバーはベンダーのインフラに依存する必要があります。FAQではAtaiが最新のハードウェアで動作すると述べていますが、確認のためにトライアルやデモがあればよかったと思います。
最終評価と推奨
AutomatedTesting.aiは、高額な実行ごとの課金に縛られることなくテスト作成を自動化したいチームにとって、よく設計された予算に優しいソリューションです。独立した開発者、小規模チーム、そして自身でOpenAIアカウントとS3バケットを管理することに抵抗のない人に適しています。99ドルのライフタイムライセンスはMacユーザーにはお買い得であり、月額19ドルのクラウドプランはMac以外のユーザーにとって競争力があります。
大規模な企業や、APIキーとストレージを設定するDevOpsスキルがないチームにとっては、TestimやFunctionizeのようなよりマネージドなツールの方が導入しやすいかもしれません。しかし、透明性、低コスト、そしてソースコードの確認と修正ができることを重視するなら、AutomatedTesting.aiは賢い選択です。
AutomatedTesting.ai(https://automatedtesting.ai/)にアクセスして、ご自身でお確かめください。
コメント