AutomatedTesting.ai

Avis sur AutomatedTesting.ai : génération de tests automatisés par IA avec Sprucebot

IA Texte IA Programmation
4.3 (14 évaluations)
29
AutomatedTesting.ai screenshot

Qu'est-ce qu'AutomatedTesting.ai et comment fonctionne-t-il ?

En visitant le site, j'ai été accueilli par une page d'accueil propre et directe qui va droit au but : « Ces tests s'écrivent eux-mêmes ! » AutomatedTesting.ai, prononcé « Atai », est un outil qui utilise la Vision IA pour générer des cas de test automatisés à partir de prompts en anglais simple. Au cœur de l'expérience se trouve Sprucebot, l'assistant numérique qui agit comme un gestionnaire de modèles d'IA plutôt que d'être lui-même une IA générative.

Le flux de travail est d'une simplicité rafraîchissante. Vous décrivez ce que vous voulez tester, les critères de réussite et les éventuels cas limites. Ensuite, vous appuyez sur « Build Test Steps » et Sprucebot parcourt votre application en priorisant la Vision IA, créant les étapes de test. Après cela, vous pouvez exécuter ces étapes à plusieurs reprises sans impliquer l'IA, ce qui maintient les coûts d'exécution proches de zéro. J'ai particulièrement apprécié la fonctionnalité « Ride Alongs » : vous pouvez regarder Sprucebot construire un test en temps réel et l'arrêter s'il dévie.

Lors de mon inspection, j'ai remarqué qu'Atai est construit sur la Spruce Development Platform (TypeScript, Node, websockets, MongoDB). La pile technologique est moderne, et la disponibilité du code source pour la licence à vie est un avantage rare. La FAQ révèle que seuls deux ingénieurs à temps plein et un rédacteur technique à temps partiel ont construit ce produit — il s'agit donc d'un produit de niche, mais ils ont clairement réfléchi à l'architecture.

Tarifs et licence : un modèle rafraîchissant d'honnêteté

Les tarifs sont l'un des principaux différenciateurs ici. Vous avez deux options :

  • Téléchargement à vie – 99 $ une fois (Mac uniquement). Cela inclut le code source complet, la documentation développeur et les mises à jour. Vous exécutez tout localement.
  • Abonnement cloud – 19 $/mois. Cela exécute Sprucebot dans le cloud, mais nécessite toujours que vous fournissiez votre propre clé OpenAI et votre bucket S3 pour le stockage des captures d'écran.

L'approche de répercussion des coûts est ce qui rend la plateforme si abordable. Vous payez pour l'outil, mais vous payez les tokens d'IA séparément via votre propre compte OpenAI. La FAQ explique clairement : « Utilisez l'IA là où elle est utile, les systèmes experts là où elle ne l'est pas. » Une fois les étapes de test générées, elles sont sauvegardées sous forme de scripts Puppeteer et exécutées sans frais d'IA supplémentaires. Cela contraste fortement avec des concurrents comme Testim ou Mabl, qui facturent souvent par exécution de test ou exigent un abonnement incluant les coûts d'inférence IA. Pour une équipe avec un budget serré, ce modèle change la donne.

Cela dit, il y a des limitations. Le téléchargement à vie à 99 $ est disponible uniquement pour Mac, et vous ne pouvez pas héberger le logiciel publiquement. Si vous avez besoin de Windows ou Linux, vous devrez attendre ou utiliser l'abonnement cloud. De plus, même le forfait cloud vous oblige à gérer votre propre bucket S3 et votre clé OpenAI, ce qui ajoute un peu de friction lors de la configuration.

Forces et limites : ce qui fonctionne et ce qui ne fonctionne pas

La plus grande force d'AutomatedTesting.ai réside dans son architecture unique. En découplant la génération des tests de leur exécution, il évite le « vendor lock-in » qui affecte de nombreux outils de test IA. Vous générez les étapes une fois, puis vous les exécutez localement avec Puppeteer — pas de coûts d'IA récurrents. Cela le rend idéal pour les projets avec des exécutions fréquentes ou de grandes suites de tests.

Parmi les autres fonctionnalités intéressantes, citons les Test Repairs (Sprucebot peut réparer les tests lorsque votre interface utilisateur change), les Dummy Data / Dummy Users (variables et identifiants configurables), et la possibilité de regarder les tests s'exécuter en temps réel. Les cas de test et suites illimités sont un bonus, et l'accès au code source pour le plan à vie est une rareté qui attire les utilisateurs avancés et les équipes soucieuses de la sécurité.

Cependant, l'outil n'est pas sans inconvénients. Il ne prend actuellement en charge que les modèles Vision d'OpenAI, vous ne pouvez donc pas brancher d'autres backend d'IA. L'équipe est très petite (deux ingénieurs), ce qui peut affecter la fréquence des mises à jour et les temps de réponse du support. La restriction « Mac uniquement » sur la version auto-hébergée constitue un obstacle important pour les développeurs sous Windows ou Linux. De plus, aucun hébergement public n'est autorisé, les abonnés au cloud doivent donc compter sur l'infrastructure du fournisseur. La FAQ mentionne qu'Atai fonctionne sur du matériel moderne, mais j'aurais aimé un essai ou une démo pour vérifier.

Verdict final et recommandations

AutomatedTesting.ai est une solution bien conçue et économique pour les équipes qui souhaitent automatiser la création de tests sans être enfermées dans une facturation coûteuse par exécution. Il convient aux développeurs indépendants, aux petites équipes et à toute personne

Informations du domaine

Chargement des informations du domaine...
345tool Editorial Team
345tool Editorial Team

We are a team of AI technology enthusiasts and researchers dedicated to discovering, testing, and reviewing the latest AI tools to help users find the right solutions for their needs.

我们是一支由 AI 技术爱好者和研究人员组成的团队,致力于发现、测试和评测最新的 AI 工具,帮助用户找到最适合自己的解决方案。

Commentaires

Loading comments...