WQR 2025-2026: nous avons un vrai problème avec l’IA!

Comme je le mentionnais dans un article de 2023, j’aime beaucoup le World Quality Report (WQR). Je trouve qu’il apporte beaucoup d’informations et une vision et plus précisément une tendance « haut niveau » du test et de la qualité.

Tout ce qui est écrit dans cet article n’est pas pour critiquer le WQR, on ne critique pas le messager, mais bien pour analyser une tendance lourde qui est pour moi très problématique: le fait de voir et mettre de l’IA partout et ce au détriment de tout le reste… Et même de ce que je pourrais appeler « bon sens ».

Cette enquête m’a confirmé qu’actuellement nous avons un vrai problème avec l’IA!

Voici le lien vers le WQR 2025-26.

Le WQR parle énormément d’IA

Cela n’est pas surprenant mais il reste important de le dire: le WQR parle énormément d’IA.

On y retrouve une partie dédiée: « Quality Engineering in AI » mais pas seulement car l’IA s’invite dans toutes les autres parties: automatisation, data, Agile, organisations et shifting quality right.

L’IA au centre des attentions: Quality Engineering in AI »

L’IA est présente dans quasiment toutes les organisations des répondants:

Néanmoins cette présence n’est pas synonyme d’amélioration de la productivité: seules 15% des organisations annoncent une nette amélioration et plus d’un tiers une amélioration de la productivité faible ou inexistante

Les cas d’usages sont nombreux et variés… Et beaucoup, d’après les répondants, sont en production ou déjà en pilote. Soyons clair ce n’est pas ce que j’observe (et est assez éloigné des résultats de l’enquête du CFTL) mais bien ce qui est répondu. Cela s’explique grandement par le panel des répondants. Le WQR est une enquête internationale… Mais aussi une enquête ou assez peu de personnes dans les métiers du test et de la qualité répondent

Les principales difficultés remontées pour implémenter l’IA dans le test et la qualité sont la la difficulté d’intégration des IA, la sécurité et la peur des hallucinations:

La partie continue et permet d’avoir des informations très intéressantes autour des inquiétudes et indicateurs, résume les challenges principaux de l’IA puis donne des recommandations.

On est sur une partie assez complète… Qui, de mon point de vue ne nécessite pas d’informations supplémentaires… Je ne m’attendais pas à retrouver de l’IA dans toutes les autres parties!

L’IA dans toutes les parties du WQR

En plus de la partie dédié à l’IA les questions sur l’IA sont nombreuses dans toutes les parties… Et même quand ce n’est pas une question spécifique elle est dans les réponses proposées.

L’automatisation

Il n’est pas surprenant de voir de l’IA dans la partie automatisation, je considère d’ailleurs que l’IA est une forme d’automatisation de diverses activités.

On a notamment 97% des répondants qui annoncent utiliser l’IA pour leurs tests automatisés:

De même 99% des répondants annoncent de la génération de scripts automatisés par IA. Cela est à nuancer par le nombre de répondants assez faible (314 alors que 1752 sur la question juste au dessus):

Et évidemment l’IA est noté dans les challenges (pour 58% – 2ème place) et opportunités (69% – 1ère place) pour l’automatisation.

La qualité des données

Les données de test sont un problème très courant.

Pas étonnant que l’on pense à l’IA pour voir si elle peut contribuer à résoudre de problème. On a donc comme première question de cette partie l’utilisation des IA génératives pour les données:

L’IA est également le premier challenge clé mis en avant pour la qualité des données.

La qualité en Agile

On arrive là sur la question qui m’a fait écrire cet article.

En fait ce n’est pas la question en elle même mais surtout sa réponse. Selon vous, quels sont les compétences les plus importantes pour être un bon testeur ?

Avoir les compétences en test ? Savoir communiquer ?

Et ben non! la première compétence qui ressort est « savoir utiliser l’IA »

Alors, même si l’on peut relativiser en se disant que les répondants, dans leur grande majorité, ne sont pas des personnes qui connaissent le test on remarque ici un énorme problème…

J’ai 2 objections à faire à cette première remarque. La base de répondant est ici plus restreinte. Seulement 695 répondants qui son des directeurs IT (DSI), des tests manageurs et des Quality engineer. Au final on est plus proche des testeur et de la qualité avec ce pool plus restreint.

De plus, les répondant sont des décideurs… Décideurs qui risquent de recruter un testeur car il sait faire des prompts mais qui n’a aucune notion de test. La personne recrutée qui ne serait alors pas du tout en capacité de challenger et comprendre les potentiels tests faits par l’IA.

D’ailleurs, des écoliers (oui, ça commence dès la primaire) et étudiants utilisent ChatGPT pour faire faire leurs devoirs. Au final, ne seraient-ils pas plus compétents qu’un testeur expert de son métier qui n’utilise pas de LLM ? Il nous semble évident que non… Mais ce n’est pas ce qu’on répondu les sondés:

Organisations QE

Pour 40% des répondants (3ème réponse) l’IA va réduire la dépendance métier envers les équipes IT au niveau du développement et des tests.

De même l’IA semble très utilisée dans le test d’ERP

De même, pour 57% des répondants (tout le panel), les organisations liées à la qualité sont obligées d’adopter l’IA pour améliorer l’efficacité et la rapidité des différentes activités.

Shifting quality right

L’IA semble importante dans tout ce qui est supervision et mesure avec plus de 50% (37 + 16) qui utilisent l’IA au niveau organisation

Conclusion

L’IA est partout, on parle d’IA partout, l’IA est censée tout résoudre. On a de l’IA à toutes les sauces, tout le temps. En clair on fait de l’IA pour faire de l’IA.

C’est un sentiment que j’avais et qui est confirmé par ce WQR. Alors certes, comme je le disais en 2023 il y a, selon moi, toujours un décalage entre le terrain et les décideurs que l’on voit très bien dans cette enquête. Néanmoins on peut également voir que l’enquête est centrée en majorité sur l’IA, que mêmes sur les questions où l’IA devrait être derrière elle se retrouve très mise en avant.

Nous ne sommes pas, pour le moment, dépendant de l’IA mais il semblerait que nous faisions tout pour nous rendre dépendant de cette technologie qui reste, et doit rester, qu’une technologie, un outil. En ne pensant qu’à l’IA pour répondre à nos problèmes on en oublierait qu’il existe d’autres solutions, potentiellement plus efficace et sûrement moins coûteuses!

La vraie conclusion qui me vient en lisant ce WQR c’est que nous avons un vrai problème avec l’IA et qu’il va falloir sérieusement s’en occuper car sinon nous allons devenir totalement dépendant de la technologie.

Pensez à rejoindre le groupe « Le métier du test » si vous souhaitez échanger sur le test

Merci à tous ceux qui mettent « j’aime », partagent ou commentent mes articles

N’hésitez pas à faire vos propres retours d’expérience en commentaire.