Software Test Praxis, Umfrage Ergebnis 2011, Testeffektivität

Effektivität und Probleme heutiger Software-Test-Praxis

Electric Cloud — ein Hersteller von Werkzeugen, den Software-Entwicklungsprozess zu beschleunigen und weitestgehend zu automatisieren — hat Mitte 2010 eine Umfrage zur gängigen Praxis des Testens von Software in Nordamerika durchgeführt. Sie schreiben:

A total of 144 software development professionals including software developers, testers, managers, and executives were surveyed from organizations with at least 1,000 employees and 50 developers across a variety of industries. Respondents were selected using a combination of the Osterman Research survey panel and an external provider’s survey panel. The median number of employees at the organizations surveyed was 5,000 and the median number of developers was 300. Most organizations surveyed were located in North America.

58% percent of respondents pointed to problems in the testing process or infrastructure as the cause of their last major bug found in delivered or deployed software, ...

Specifically, the survey found:

Completely automated software testing environments are still rare, with just 12 percent of software development organizations using fully automated test systems.
Almost 10 percent reported that all testing was done manually.
46% of software developers said they do not have time to test as much as they should.
36% of developers said they do not believe their companies perform enough pre-release testing.
53% said their testing is limited by computing resources.

Mir, der ich zwischen 1980 und 2009 als Mitarbeiter eines bekannten deutschen Dienstleisters selbst jeden Tag mit Entwurf, Implementierung oder dem Test von Software zu tun hatte (im eigenen Haus oder vor Ort im Team des Kunden) kommt dieses Ergebnis durchaus plausibel und auch auf deutsche Verhältnisse zutreffend vor.

Hinzufügen würde ich lediglich, dass die hohen Summen, die ich große Firmen (Banken und Versicherungen etwa) für Test ausgeben sah, deutlich besser angelegt wären, wenn man jedes Testteam zwingen würde, transparent zu machen,

welche Details im einzelnen denn nun wirklich getestet wurden,
gegen welche Spezifikationspapiere man geprüft hat,
und — vor allem — welches Ausmaß an Testabdeckung die jeweils letzte Testwiederholung erzielt hat:

Derzeit nämlich wird der Tester viel zu sehr sich selbst überlassen — seine Effektivität zu monitoren und gezielt zu steigern wird nirgendwo wirklich versucht (!).

Welch furchtbare Folgen das gelegentlich haben kann, zeigt deutlicher als jedes andere Projekt der Postmaster Skandal in UK, dessen gewaltiges Ausmaß erst jetzt offenbar wird — 20 Jahre nachdem gleich zwei Test Teams dramatisch versagt haben (!).

stw5422PEP — Praxis . Effektivität . Probleme — News?

Mehr + B G E + S H A + More

Was es bedeuten kann, wenn Software-Tester versagen

Wissenswertes zu
Testeffektivität, Umfrage Ergebnis 2011, Software Test Praxis