BI-Prüfplan: So werden Ergebnisse vergleichbar
Vergleichbare Tests brauchen dieselben Daten, dieselben Aufgaben und dokumentierte Grenzen. Hier steht unser Prüfplan; abgeschlossene Produktvergleiche liegen noch nicht vor.
Datensatz und Kontrollwerte
Das BIS-GSC-Muster ist synthetisch. Es dient zur Prüfung von Import, Summen und CTR. Es enthält keine echten Besucher- oder Kundendaten und belegt keine Leistung unter hoher Last. Erweiterungen um Geschäftsdaten erhalten eine eigene Version und eigene Sollwerte.
| Aufgabe | Abnahmekriterium | Beleg |
|---|---|---|
| Import | Zeilen und Datentypen stimmen mit dem Muster überein | Importeinstellungen und Zählung |
| Kennzahlen | Summen und gewichtete CTR entsprechen Sollwerten | Export oder Screenshot plus Filter |
| Filter | Zeitraum und Domain begrenzen alle vorgesehenen Ansichten | Werte vor/nach Filter |
| Verknüpfung | Keine ungewollte Vervielfachung von Zeilen | Schlüssel- und Zeilenzählung |
| Berechtigungen | Leser sehen nur freigegebene Daten | Versuch mit getrenntem Leseraccount |
| Aktualisierung | Neue und geänderte Zeilen kommen korrekt an | Zwei nachvollziehbare Läufe |
| Export und Wechsel | Daten und relevante Definitionen lassen sich sichern | Exportdateien und dokumentierte Lücken |
Was bei jedem Durchlauf festgehalten wird
Produkt und Tarif, Testdatum, Datenversion, Aufgabe, Start- und Endzeit, Hilfestellungen, Ergebnis, Fehler und öffentliche Belege. Wartezeit, aktive Arbeitszeit und Korrekturzeit werden getrennt erfasst. Ein nicht durchführbarer Schritt bleibt als nicht geprüft sichtbar.
Wann hier Ergebnisse erscheinen
Erst wenn der betreffende Durchlauf tatsächlich abgeschlossen ist und sich die Aussage mit einem Beleg verbinden lässt. Eine Testnote wird nicht aus Herstellerangaben abgeleitet. Subjektive Bedienungseindrücke werden von gemessenen Werten getrennt.
Für den geplanten gemeinsamen Vergleich fehlen noch abgeschlossene Durchläufe in mindestens drei BI-Werkzeugen. Bis dahin sind die Softwareprofile ausdrücklich Herstellerprofile.