Exemples d’évolution du test vue à travers l’enquête du CFTL

L’édition 2022 de l’enquête CFTL sur les pratiques des tests logiciels en France sera la 4ème édition d’une série démarrée en 2013, puis réalisée en 2017 et 2019.

Si vous n’avez pas encore participé à l’édition 2022, c’est le moment de le faire ICI, car elle sera clôturée le 15 janvier prochain. En attendant les résultats 2022, nous présentons 4 résultats significatifs, et parfois très surprenant, à partir des enquête 2013, 2017 et 2019, qui illustrent l’évolution de nos organisations de test, de nos pratiques et de la façon de percevoir notre métier de testeur.

Des testeurs de plus en plus intégrés dans l’équipe projet/produit

La généralisation des pratiques Agile a fait évoluer fortement l’organisation des tests, avec une intégration des testeurs dans l’équipe (à 55 % en 2019) tout en conservant dans de nombreux contextes tout ou partie des tests réalisés par une équipe indépendante (à plus de 39% en 2019). Le graphique ci-dessous montre ces tendances, en détaillant entre « intégration dans l’équipe », « test totalement géré par une équipe indépendante du projet » et situation mixte. Il sera intéressant de voir si cette tendance s’est poursuivie en 2022 ou au contraire si nous connaissons un pallier.

La documentation de test a amorcé une décrue

Moins de documentation de test est une autre conséquence de l’Agilité. La figure ci-dessous montre une légère cela au travers d’une légère décroissance de la documentation de test entre 2019 et 2017. A ce stade, les chiffres ne sont pas encore très significatifs, mais on peut penser que cette tendance va se poursuivre en 2022.

Réponses à la question : Un plan de test documenté est-il mis en œuvre pour chaque projet ?

Un niveau d’automatisation des tests qui croit faiblement

Une très grande surprise de l’enquête 2019 avait été le constat d’une stagnation du niveau d’automatisation déclaré des tests. Comme le montre le tableau ci-dessous, la croissance significative du niveau d’automatisation des tests qui se manifeste entre 2017 et 2019 est faible. C’est d’autant plus une surprise que depuis 2013, l’automatisation des tests est indiquée comme une forte priorité d’amélioration des tests par les répondants de l’enquête CFTL. Des efforts importants ont donc été réalisé par les organisations mais se traduisait peu dans les chiffres ci-dessous.

Option de réponse201320172019
Moins de 10%43,7%43,3%39,1%
Entre 10 et 25%28,8%28,4%22,7%
Entre 25 et 50%17,2 %15,8%20,4%
Entre 50 et 75%7,7%8,4%12,2%
Au-delà de 75%2,5%4,2%5,6%
Réponses à la question : Quelle estimation faites-vous du pourcentage d’automatisation du patrimoine de test ?

Un positionnement professionnel dans le domaine des tests jugé favorablement

Le positionnement professionnel dans les métiers des tests logiciels vu positivement pour les deux-tiers des répondants sans changement notable depuis 2013. Si on agrège les répondes « Oui, tout à fait » et « Oui, plutôt » du tableau ci-dessous, on obtient une constance remarquable à 68%, ce qui est remarquable entre 2013 et 2019. Est-ce que ces dernières années, notre profession a connu une augmentation de la vision favorable, ou au contraire une diminution ? Nous le verrons dans les résultats 2022.

Options de réponses201320172019
Oui, tout à fait28,5%29,8%36,7%
Oui, plutôt38,8%38,4%32%
Non, pas vraiment26,3%23,2%25,1%
Non, pas du tout6,4%8,6%6,2%
Réponses à la question : Considérez-vous votre positionnement (sur le domaine du test) comme une évolution favorable de votre carrière ?

En conclusion : apportez votre contribution à l’enquête 2022 !

Au fil du temps, l’enquête CFTL est devenue une référence en France pour mesurer l’ampleur des transformations de l’organisation des tests, des pratiques de test et du rôle des testeurs. La quantité de répondants, leur représentativité, et la permanence de l’enquête sur un période longue (dix ans déja !) permet d’avoir des données uniques et à même d’étayer les réflexions et choix des équipes de test. Les résultats sont diffusés par le CFTL avec une licence open-source Creative Commons qui permet à ceux qui le souhaite d’utiliser les résultats dans leur présentation ou publication en citant la source.

L’enquête CFTL 2021-2022 va être clôturée au 15 janvier. Votre participations est bien sur attendue car un facteur clé de la représentativité des résultats. Nous espérons que cet extrait des données des enquêtes précédentes vous aura donné envie de contribuer ICI, si ce n’est pas déjà réalisé.

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *

culture générale

[ISTQB] Les Revues

Introduction Les revues sont des tests statiques, c’est à dire que c’est des tests que l’on peut exécuter sans avoir besoin de faire fonctionner le logiciel. L’intérêt de ces tests est très grand d’un point de vue économie d’argent (on détecte les anomalies plus tôt) mais aussi time to market

Lire la suite »
Image représentant le test et de nombreux éléments liés
Avenir

Résultats sondage 2024: quels futurs pour le test ?

Ce sondage a été mené en juin et juillet 2024. Il a recueilli 101 réponses ce qui est sensiblement identique à la première édition de 2018 mais malheureusement bien moins qu’en 2021. Je remercie énormément tous les participants qui permettent de mieux connaitre quel est la vision du futur du

Lire la suite »
Interview

Marc Hage Chahine: Passionné Test Logiciel – Interview #1

Bonjour, qui êtes-vous, quel est votre métier et quelles sont vos activités professionnelles ? Je suis Marc Hage Chahine et travaille dans le test logiciel depuis fin 2011. J’ai pu au cours de mes 5 premières années travailler sur de nombreux projets, rencontrer de nombreux experts du test ce qui me

Lire la suite »