Kapitel 9. Auswerten

Inhaltsverzeichnis

9.1. Das Dashboard
9.1.1. Standard-Dashboard
9.1.2. Dashboard-Berichte bearbeiten
9.1.3. Berichtstypen
9.2. Berichte
9.2.1. Vordefinierte Berichte
9.3. Testläufe
9.3.1. Aktion
9.3.2. Massenaktionen
9.3.3. Tabellenoperationen
9.3.4. Der Testlauf - Bericht
9.3.5. Detailseite
9.3.6. Änderungen
9.4. Testfallergebnisse
9.4.1. Aktion
9.4.2. Massenaktionen
9.4.3. Tabellenoperationen
9.4.4. Ergebnisse eines einzelnen Testfalls
9.5. Testsuiteergebnisse
9.5.1. Aktion
9.5.2. Tabellenoperationen
9.5.3. Ergebnisse einer einzelnen Testsuite
9.6. Issues
9.6.1. Übersichtsseite
9.6.2. Aktion
9.6.3. Massenaktionen
9.6.4. Tabellenoperationen
9.6.5. Detailseite
9.6.6. Issue - Details
9.6.7. Einen Issue verlinken

Dieses Kapitel zeigt, wie die beim Testen angefallenen Daten und Ergebnisse ausgewertet werden können. Es wird beschrieben, wie das Dashboard eingesetzt und angepasst wird, Berichte konfiguriert und angezeigt werden können und wie die gefundenen Issues an das angebundene Issue-Management-System übergeben, Testfällen oder Testsystemen zugeordnet und bei Bedarf geändert werden können.

9.1. Das Dashboard

Ein Dashboard ist eine Übersichtsseite für als Diagramm dargestellte, konfigurierbare Berichte. Dashboards können individuell zusammengestellt und für andere Benutzer freigegeben oder gesperrt werden. Jeder Benutzer kann beliebig viele Dashboards zusammenstellen. Ein Beispiel für ein Dashboard ist in Figure 9.1 zu sehen.

  • Neu fügt einen neuen Bericht zum Dashboard hinzu.
  • Speichern speichert alle Änderungen am Dashboard und den Berichten.
  • Abbrechen verwirft alle Änderungen am Dashboard und den Berichten.
Die Seite „Dashboard“

Abbildung 9.1. Die Seite Dashboard


Benutzer können jederzeit zwischen verschiedenen Dashboards wechseln. In der Dropdown-Liste auf der rechten oberen Seite werden alle verfügbaren Dashboards (private und von anderen Benutzern freigegebene) angezeigt. Daneben befinden sich mehrere Icons:

  •   Wenn ausgewählt, können alle Benutzer dieses Dashboard verwenden.
  •   Wenn ausgewählt, kann nur der Eigentümer das Dashboard bearbeiten.
  •   Wenn ausgewählt, ist dies das Standard-Dashboard.
  •   Erzeugt eine private Kopie des Dashboards.
  •   Löscht das Dashboard und alle Berichte.

Die Anzahl der Spalten, in denen die Berichte angezeigt werden sollen, lässt sich oben rechts in den mit 1 bis 4 nummerierten Buttons festlegen. Die aktuell ausgewählte Anzahl von Berichten pro Zeile ist orange markiert. Berichte können durch Ziehen und Ablegen an eine andere Position verschoben werden.

Alle Dashboard-Berichte sind gleich aufgebaut: Sie bestehen aus einer Titelleiste und dem Bereich, in dem das Diagramm angezeigt wird. Die Titelleiste enthält den Namen des Berichts und mehrere Icons:

  •   Öffnet einen Dialog zum Bearbeiten der Berichtskonfiguration.
  •   Lädt den Bericht als PNG-Datei herunter.
  •   Maximiert/minimiert den Bericht.
  •   Löscht den Bericht.

9.1.1. Standard-Dashboard

Beim ersten Start von Klaros-Test­management wird ein Standard-Dashboard mit drei vordefinierten Berichten erstellt. Dieses Dashboard ist für alle Benutzer freigegeben und wird automatisch für alle neuen Benutzer angezeigt. Administratoren können das Standard-Dashboard ändern, indem sie ein beliebiges anderes Dashboard als Standard-Dashboard festlegen.

[Anmerkung] Anmerkung

Es gibt stets nur ein einziges Standard-Dashboard. Wird ein neues Standard-Dashboard festgelegt, verliert das vorherige Standard-Dashboard diesen Status.

9.1.2. Dashboard-Berichte bearbeiten

Beim Klick auf das Icon öffnet sich ein Dialog, der alle konfigurierbaren Parameter des Berichts anzeigt, sowie den Berichtstyp, der nicht geändert werden kann. Änderungen können durch Klick auf den Button OK auf den Bericht angewendet oder durch Klick auf den Button Abbrechen verworfen werden.

Der Dialog „Report konfigurieren“

Abbildung 9.2. Der Dialog Report konfigurieren


9.1.3. Berichtstypen

Alle Berichte zeigen initial die Auswertung der Daten aus dem aktiven Projekt an.

Zusätzlich zu den Daten des aktiven Projekts, können in der Klaros-Test­management Enterprise Edition auch Daten bestimmter Projekte angezeigt werden.

Die Klaros-Test­management Community Edition enthält drei Berichtstypen:

  • Projektübersicht
  • Letzte Erfolgsrate
  • Testaktivität

Die Klaros-Test­management Enterprise Edition enthält zudem vier zusätzliche Berichtstypen:

  • Testsystem - Übersicht
  • Testumgebung - Übersicht
  • Testfortschritt - Historie
  • Testfortschritt

Alle Berichte sind in den folgenden Abschnitten detailliert beschrieben.

9.1.3.1. Der Bericht Projektübersicht

Der Bericht Projektübersicht zeigt verschiedene Metriken eines einzelnen Projekts in einem Diagramm.

Der Bericht „Projektübersicht“

Abbildung 9.3. Der Bericht Projektübersicht


Dieser Bericht zeigt die folgenden Metriken:

  • Die Anzahl der ausgeführten/nicht ausgeführten Testfälle.
  • Die Anzahl der ausgeführten/nicht ausgeführten Testsuiten.
  • Die Anzahl der geplanten/ausgeführten Aufgaben.

Die folgenden Parameter des Berichtsdiagramms Projektübersicht sind konfigurierbar:

  • Der Name des Berichtsdiagramms.
  • Die Auswahl, ob in diesem Bericht das aktive Projekt oder ein anderes verwendet werden soll (nur in der Klaros-Test­management Enterprise Edition enthalten).
  • Die Auswahl, ob in diesem Bericht die aktive Iteration oder eine andere verwendet werden soll.
  • Falls nicht die aktive Iteration verwendet wird, wird hier eine Dropdown-Liste mit den verfügbaren Iterationen angezeigt.

9.1.3.2. Der Bericht Letzte Erfolgsrate

Der Bericht Letzte Erfolgsrate zeigt die neuesten Ergebnisse der ausgeführten Testfälle für die ausgewählte Kombination aus Testsystem (eins oder mehrere) und Testumgebung (eine oder mehrere).

Der Bericht „Letzte Erfolgsrate“

Abbildung 9.4. Der Bericht Letzte Erfolgsrate


Die folgenden Parameter des Berichtsdiagramms Letzte Erfolgsrate sind konfigurierbar:

  • Ein oder mehrere Testsysteme.
  • Ein oder mehrere Testumgebungen.
  • Der Name des Berichtsdiagramms.
  • Die Auswahl, ob in diesem Bericht das aktive Projekt oder ein anderes verwendet werden soll (nur in der Klaros-Test­management Enterprise Edition enthalten).
  • Falls nicht das aktive Projekt verwendet wird, können folgende zu betrachtende Objekte ausgewählt werden:
  • Die Auswahl, ob in diesem Bericht die aktive Iteration oder eine andere verwendet werden soll.
  • Falls nicht die aktive Iteration verwendet wird, wird hier eine Dropdown-Liste mit den verfügbaren Iterationen angezeigt.

9.1.3.3. Der Bericht Testaktivität

Der Bericht Testaktivität zeigt die Testfallergebnisse für eine ausgewählte Kombination aus einem oder mehreren Testsystemen und Testumgebungen in einem ausgewählten Zeitraum als Histogramm an.

Der Bericht „Testaktivität“

Abbildung 9.5. Der Bericht Testaktivität


Die folgenden Parameter des Berichtsdiagramms Testaktivität sind konfigurierbar:

  • Projekt
  • Iteration (sofern vorhanden)
  • Ein oder mehrere Testsysteme
  • Ein oder mehrere Testumgebungen
  • Der Name des Berichtsdiagramms.
  • Die Auswahl, ob in diesem Bericht das aktive Projekt oder ein anderes verwendet werden soll (nur in der Klaros-Test­management Enterprise Edition enthalten).
  • Falls nicht das aktive Projekt verwendet wird, können folgende zu betrachtende Objekte ausgewählt werden:
  • Die Auswahl, ob in diesem Bericht die aktive Iteration oder eine andere verwendet werden soll.
  • Falls nicht die aktive Iteration verwendet wird, wird hier eine Dropdown-Liste mit den verfügbaren Iterationen angezeigt.
  • Die zu betrachtende Zeitperiode in Tagen.

9.1.3.4. Der Bericht Testsystem - Übersicht

Der Bericht Testsystem - Übersicht zeigt die Erfolgs- und Fortschrittsrate von Testumgebungen unter einem einzigen Testsystem in einem Radardiagramm an. Sind weniger als drei Testumgebungen konfiguriert, wird stattdessen ein Balkendiagramm angezeigt.

Der Bericht „Testsystem Übersicht“

Abbildung 9.6. Der Bericht Testsystem Übersicht


Die folgenden Parameter des Berichtsdiagramms Testsystem - Übersicht sind konfigurierbar:

  • Das Projekt.
  • Iteration, sofern vorhanden.
  • Ein Testsystem.
  • Ein oder mehrere Testumgebungen.
  • Der Name des Berichtsdiagramms.
  • Die Auswahl, ob in diesem Bericht das aktive Projekt oder ein anderes verwendet werden soll (nur in der Klaros-Test­management Enterprise Edition enthalten).
  • Falls nicht das aktive Projekt verwendet wird, können folgende zu betrachtende Objekte ausgewählt werden:
  • Die Auswahl, ob in diesem Bericht die aktive Iteration oder eine andere verwendet werden soll.
  • Falls nicht die aktive Iteration verwendet wird, wird hier eine Dropdown-Liste mit den verfügbaren Iterationen angezeigt.

9.1.3.5. Der Bericht Testumgebung - Übersicht

Der Bericht Testumgebung - Übersicht zeigt die Erfolgs- und Fortschrittsrate von Testsystemen unter einer einzigen Testumgebung in einem Radardiagramm an. Sind weniger als drei Testsysteme konfiguriert, wird stattdessen ein Balkendiagramm angezeigt.

Der Bericht „Testumgebungen - Übersicht“

Abbildung 9.7. Der Bericht Testumgebungen - Übersicht


Die folgenden Parameter des Berichtsdiagramms Testumgebung - Übersicht sind konfigurierbar:

  • Projekt
  • Iteration, sofern vorhanden.
  • Ein oder mehrere Testsysteme.
  • Eine Testumgebung.
  • Der Name des Berichtsdiagramms.
  • Die Auswahl, ob in diesem Bericht das aktive Projekt oder ein anderes verwendet werden soll (nur in der Klaros-Test­management Enterprise Edition enthalten).
  • Falls nicht das das aktive Projekt verwendet wird, können folgende zu betrachtende Objekte ausgewählt werden:
  • Die Auswahl, ob in diesem Bericht die aktive Iteration oder eine andere verwendet werden soll.
  • Falls nicht die aktive Iteration verwendet wird, wird hier eine Dropdown-Liste mit den verfügbaren Iterationen angezeigt.

9.1.3.6. Der Bericht Testfortschritt

Der Bericht Testfortschritt zeigt die Rate der ausgeführten gegenüber den definierten Testfällen eines Projekts für eine bestimmte Menge von Testumgebungen und Testsystemen.

Der Bericht „Testfortschritt“

Abbildung 9.8. Der Bericht Testfortschritt


Die folgenden Parameter des Berichtsdiagramms Testfortschritt sind konfigurierbar:

  • Projekt
  • Iteration, sofern vorhanden.
  • Ein oder mehrere Testsysteme.
  • Ein oder mehrere Testumgebungen.
  • Der Name des Berichtsdiagramms.
  • Die Auswahl, ob in diesem Bericht das aktive Projekt oder ein anderes verwendet werden soll (nur in der Klaros-Test­management Enterprise Edition enthalten).
  • Falls nicht das das aktive Projekt verwendet wird, können folgende zu betrachtende Objekte ausgewählt werden:
  • Die Auswahl, ob in diesem Bericht die aktive Iteration oder eine andere verwendet werden soll.
  • Falls nicht die aktive Iteration verwendet wird, wird hier eine Dropdown-Liste mit den verfügbaren Iterationen angezeigt.
  • Die Auswahl, ob nur Testfälle berücksichtigt werden sollen, die Aufgaben zugeordnet sind.

9.1.3.7. Der Bericht Testhistorie

Der Bericht Testhistorie zeigt die Rate der definierten Testfälle gegenüber den ausgeführten Testfällen eines Projekts für eine oder mehrere Testumgebungen und ein oder mehrere Testsysteme in einer bestimmten Zeitperiode an.

Der Bericht „Testhistorie“

Abbildung 9.9. Der Bericht Testhistorie


Die folgenden Parameter des Berichtsdiagramms Testhistorie sind konfigurierbar:

  • Projekt
  • Iteration, sofern vorhanden.
  • Ein oder mehrere Testsysteme.
  • Ein oder mehrere Testumgebungen.
  • Der Name des Berichtsdiagramms.
  • Die Auswahl, ob in diesem Bericht das aktive Projekt oder ein anderes verwendet werden soll (nur in der Klaros-Test­management Enterprise Edition enthalten).
  • Falls nicht das das aktive Projekt verwendet wird, können folgende zu betrachtende Objekte ausgewählt werden:
  • Die Auswahl, ob in diesem Bericht die aktive Iteration oder eine andere verwendet werden soll.
  • Falls nicht die aktive Iteration verwendet wird, wird hier eine Dropdown-Liste mit den verfügbaren Iterationen angezeigt.
  • Die zu betrachtende Zeitperiode in Tagen