Contenu
- Suites d'automatisation des tests fonctionnels continus (T2 2020)
- L'automatisation des tests devient plus intelligente
- L'aubergine sur le trône, mais…
- Les dirigeants en détail
- Résumé et perspectives
Suites d'automatisation des tests fonctionnels continus
Le nouveau rapport Forrester Wave, consacré aux suites d'automatisation des tests fonctionnels, vient d'être publié. Nous consultons régulièrement les rapports de Gartner et Forrester pour rester informés des tendances du marché et conseiller au mieux nos clients. Ce rapport est particulier, car Eggplant a laissé place à un nouveau leader. Il est temps d'examiner de plus près ce nouveau venu et ses concurrents.
Ce rapport présente les 15 principaux fournisseurs de solutions d'automatisation des tests fonctionnels continus (CFTA), évalués selon 26 critères. Je souhaite me concentrer sur les 4 leaders et sur quelques lauréats surprenants pour l'un des critères.
Mais avant tout, voyons où l'automatisation des tests va évoluer prochainement et si la pandémie de COVID a eu une influence sur cela.
L'automatisation des tests devient plus intelligente
Nous continuons à travailler en équipes agiles et, en raison de la pandémie, davantage à distance. Nous devons être plus adaptables et livrer des logiciels plus rapidement et de manière continue.
Dans le domaine de l'automatisation des tests, un ensemble de tests de régression très robuste a longtemps été essentiel. Il nous fallait fournir des cas de test sujets aux erreurs, mais aussi faciles à maintenir.
Ces temps sont révolus, du moins dans le domaine des applications web. En revanche, pour les tests d'applications progiciels, ces ensembles de tests de régression robustes restent indispensables et le resteront encore longtemps.
…nous avons besoin d’une suite d’automatisation qui permette une automatisation rapide et facile
Aujourd'hui, l'automatisation rapide est essentielle. Cela signifie qu'à la fin d'une user story, un nouveau test automatisé est prêt à être exécuté ou qu'un test existant a été mis à jour. Nous avons donc besoin d'une suite d'automatisation qui permette une automatisation rapide et facile. Cela implique également des technologies avancées comme le low-code, l'IA et l'automatisation basée sur le ML pour les tests d'interface graphique et d'API. Et bien sûr, nous ne voulons pas réécrire ces tests pour notre suite RPA.
Si vous recherchez un nouvel outil d'analyse de la fonction cible (CFTA), choisissez un fournisseur qui propose :
- Rendez l'automatisation des tests fonctionnels plus intelligente et plus autonome
- Fournir de multiples fonctionnalités de test intégrées à l'automatisation des tests fonctionnels
- Offrir une expérience de test attrayante, uniforme et simple
L'aubergine sur le trône, mais…
L'époque des anciens leaders comme Microfocus (Mercury Interactive > HP Software) et IBM (Rational) est révolue. Tricentis a exercé une domination sans partage ces dernières années, mais un nouveau venu s'est hissé sur le trône : Eggplant.
Examinons donc de plus près ces leaders situés dans le coin supérieur droit du dernier rapport Forrester Wave.
Forrester Wave : Suites d'automatisation des tests fonctionnels continus T2 2020
Les dirigeants
Le modèle Forrester Wave examine 16 attributs principaux répartis en 3 catégories. Nous passons en revue chaque catégorie et déterminons quels leaders sont particulièrement performants ou non sur un attribut spécifique.
CTFA : Offre actuelle
Le score maximal que vous pouvez obtenir est toujours de 5,0 par critère. En moyenne, voici les gagnants de l'offre actuelle :
- Tricentis (4.52)
- Aubergine (4,47)
- Broadcom (3,85)
- ACCELQ (3,67)
- Parasoft (3.50)
Quelques points saillants :
- Tricentis est le leader des tests d'applications packagées, Parasoft est plutôt en retrait dans ce domaine.
- Lors des tests d'automatisation BP et RP, Eggplant et Tricentis ont obtenu le maximum de points, tandis que les 2 autres n'ont obtenu qu'1 point.
- Le seul domaine où Eggplant est mieux noté que Tricentis concerne les environnements d'exploitation, grâce à sa plus grande flexibilité. Cela devrait changer prochainement, Tricentis s'appuyant sur son expertise de la plateforme qTest pour combler cet écart.
CTFA : Stratégie
En moyenne, ce sont les gagnants en stratégie :
- Aubergine (4,40)
- Saucelabs (4.40)
- Parasoft (4.00)
- Micro Focus (4.00)
- mabl (4.00)
- ACCELQ (3,80)
- Tricentis (3,60)
Quelques points saillants :
- C’est donc dans cette catégorie que l’on comprend pourquoi Eggplant a surpassé Tricentis.
- Eggplant obtient la meilleure note en matière de vision produit, de feuille de route d'exécution et de feuille de route d'innovation, tandis que Tricentis n'obtient que 3,0 points.
- Parasoft et Tricentis dominent l' écosystème des partenaires, un domaine qu'Eggplant doit rapidement conquérir s'il souhaite réussir sur le long terme.
- Il est à noter que Saucelabs, mabl et Micro Focus ont une vision et une stratégie très solides, et qu'ils sont impatients de (re)prendre leur place parmi les leaders.
CTFA : Présence sur le marché
Cette catégorie est particulière car elle n'a aucune incidence sur votre position sur la vague. Elle détermine uniquement l'étendue de votre cercle (votre présence sur le marché).
En moyenne, ce sont les gagnants en matière de présence sur le marché :
- IBM (5.00)
- Micro Focus (4.50)
- Broadcom (4,50)
- Tricentis (4.00)
- Smartbear (4.00)
- Parasoft (3.50)
- Laboratoires de sauce (3.50)
- Ranorex (3.50)
- Aubergine (3,00)
- ACCELQ (1,50)
Résumé et perspectives
Je pense qu'Eggplant a pris Tricentis par surprise. Tricentis se concentrait sur ses partenariats RPA et SAP et n'était plus en mesure de se doter d'une vision et d'une stratégie claires. Eggplant, en revanche, propose une technologie d'enregistrement d'écran par IA véritablement innovante et simple d'utilisation, et a élaboré une vision ambitieuse qui n'a pas été remarquée uniquement par Forrester. Tricentis tente désormais de combler son retard en matière d'automatisation des tests pilotée par l'IA avec le lancement de NEO. Plus surprenant encore, de nouveaux venus comme ACCELQ se hissent soudainement parmi les leaders. Forts d'un produit novateur et d'une vision claire, l'avenir nous dira si les clients souhaiteront s'engager avec eux.
Tricentis reste donc globalement la meilleure solution, mais l'écart est désormais bien moindre…
Mais une chose est claire : tout le monde veut s’asseoir sur le trône de fer et je suis sûr que d’ici un an, la situation sera bien différente d’aujourd’hui.
Automatisez maintenant !
Si vous souhaitez en savoir plus sur ce sujet ou si vous avez besoin d'une assistance spécifique, contactez-nous dès aujourd'hui !
