Exemples d’évolution du test vue à travers l’enquête du CFTL

L’édition 2022 de l’enquête CFTL sur les pratiques des tests logiciels en France sera la 4ème édition d’une série démarrée en 2013, puis réalisée en 2017 et 2019.

Si vous n’avez pas encore participé à l’édition 2022, c’est le moment de le faire ICI, car elle sera clôturée le 15 janvier prochain. En attendant les résultats 2022, nous présentons 4 résultats significatifs, et parfois très surprenant, à partir des enquête 2013, 2017 et 2019, qui illustrent l’évolution de nos organisations de test, de nos pratiques et de la façon de percevoir notre métier de testeur.

Des testeurs de plus en plus intégrés dans l’équipe projet/produit

La généralisation des pratiques Agile a fait évoluer fortement l’organisation des tests, avec une intégration des testeurs dans l’équipe (à 55 % en 2019) tout en conservant dans de nombreux contextes tout ou partie des tests réalisés par une équipe indépendante (à plus de 39% en 2019). Le graphique ci-dessous montre ces tendances, en détaillant entre « intégration dans l’équipe », « test totalement géré par une équipe indépendante du projet » et situation mixte. Il sera intéressant de voir si cette tendance s’est poursuivie en 2022 ou au contraire si nous connaissons un pallier.

La documentation de test a amorcé une décrue

Moins de documentation de test est une autre conséquence de l’Agilité. La figure ci-dessous montre une légère cela au travers d’une légère décroissance de la documentation de test entre 2019 et 2017. A ce stade, les chiffres ne sont pas encore très significatifs, mais on peut penser que cette tendance va se poursuivre en 2022.

Réponses à la question : Un plan de test documenté est-il mis en œuvre pour chaque projet ?

Un niveau d’automatisation des tests qui croit faiblement

Une très grande surprise de l’enquête 2019 avait été le constat d’une stagnation du niveau d’automatisation déclaré des tests. Comme le montre le tableau ci-dessous, la croissance significative du niveau d’automatisation des tests qui se manifeste entre 2017 et 2019 est faible. C’est d’autant plus une surprise que depuis 2013, l’automatisation des tests est indiquée comme une forte priorité d’amélioration des tests par les répondants de l’enquête CFTL. Des efforts importants ont donc été réalisé par les organisations mais se traduisait peu dans les chiffres ci-dessous.

Option de réponse201320172019
Moins de 10%43,7%43,3%39,1%
Entre 10 et 25%28,8%28,4%22,7%
Entre 25 et 50%17,2 %15,8%20,4%
Entre 50 et 75%7,7%8,4%12,2%
Au-delà de 75%2,5%4,2%5,6%
Réponses à la question : Quelle estimation faites-vous du pourcentage d’automatisation du patrimoine de test ?

Un positionnement professionnel dans le domaine des tests jugé favorablement

Le positionnement professionnel dans les métiers des tests logiciels vu positivement pour les deux-tiers des répondants sans changement notable depuis 2013. Si on agrège les répondes « Oui, tout à fait » et « Oui, plutôt » du tableau ci-dessous, on obtient une constance remarquable à 68%, ce qui est remarquable entre 2013 et 2019. Est-ce que ces dernières années, notre profession a connu une augmentation de la vision favorable, ou au contraire une diminution ? Nous le verrons dans les résultats 2022.

Options de réponses201320172019
Oui, tout à fait28,5%29,8%36,7%
Oui, plutôt38,8%38,4%32%
Non, pas vraiment26,3%23,2%25,1%
Non, pas du tout6,4%8,6%6,2%
Réponses à la question : Considérez-vous votre positionnement (sur le domaine du test) comme une évolution favorable de votre carrière ?

En conclusion : apportez votre contribution à l’enquête 2022 !

Au fil du temps, l’enquête CFTL est devenue une référence en France pour mesurer l’ampleur des transformations de l’organisation des tests, des pratiques de test et du rôle des testeurs. La quantité de répondants, leur représentativité, et la permanence de l’enquête sur un période longue (dix ans déja !) permet d’avoir des données uniques et à même d’étayer les réflexions et choix des équipes de test. Les résultats sont diffusés par le CFTL avec une licence open-source Creative Commons qui permet à ceux qui le souhaite d’utiliser les résultats dans leur présentation ou publication en citant la source.

L’enquête CFTL 2021-2022 va être clôturée au 15 janvier. Votre participations est bien sur attendue car un facteur clé de la représentativité des résultats. Nous espérons que cet extrait des données des enquêtes précédentes vous aura donné envie de contribuer ICI, si ce n’est pas déjà réalisé.

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *

Logo de JIRA aux côté d'un puzzle représentant un crâne
Agilité

JIRA et l’Agilité : des dysfonctionnements chroniques

Etant amené à déployer des méthodes industrielles de test, et souvent dans un cadre agile, j’ai été confronté à devoir travailler avec JIRA, soit comme simple bugtracker, soit plus souvent pour implémenter une méthode agile, le cadre SCRUM. Ces situations réccurentes m’ont ainsi amené à réaliser des audits du processus

Lire la suite »
culture générale

Le test : maillon indispensable

Article publié initialement dans IT-Expert Magazine Avez-vous déjà tenté d’effectuer une réparation ou de bricoler en utilisant le mauvais outil ? Je ne vous parle pas d’outils de moindre qualité, bien sûr, mais plutôt d’employer disons un marteau pour enfoncer une vis… vous voyez ? Ou de manière plus réaliste d’utiliser une

Lire la suite »
Mythologie

Quels concepts utilisés par les religions le test reprend-t-il ?

Avant tout chose il me semble important de rappeler que les religions ont permis à l’humanité de s’unir et de réaliser des exploits qui pouvaient sembler impossibles. Je pense par exemple à la construction du Stonehenge, les pyramides (égyptienne et aussi américaines) et bien sûr à tous les édifices religieux

Lire la suite »