Laufend
Wie eine Testreihe aufgebaut ist
Vom Aufsetzen einer Reihe bis zur Veröffentlichung: welche Festlegungen vorher getroffen werden und warum die Reihenfolge dieser Schritte nicht verhandelbar ist.
Eine Testreihe, deren Kriterien während der Messung festgelegt werden, ist keine Messung mehr, sondern eine Auswahl. Deshalb steht die Reihenfolge der Schritte fest, bevor das erste Gerät ausgepackt wird.
Schritt 1 — Die Frage
Jede Reihe beginnt mit einer Frage, die sich durch eine Messung beantworten lässt. Nicht „welches Gerät ist das beste“, sondern beispielsweise „wie viel Energie verbraucht diese Geräteklasse im Bereitschaftszustand über 14 Tage“.
Eine Frage, die sich nicht messen lässt, gehört nicht in eine Testreihe. Sie kann in einen Einordnungstext gehören — das ist etwas anderes und steht woanders.
Schritt 2 — Die Auswahl, mit Regel
Welche Exemplare aufgenommen werden, wird nach einer vorher formulierten Regel entschieden: eine Preisklasse, eine Verfügbarkeitsgrenze, eine technische Eigenschaft. Die Regel wird mitveröffentlicht.
Ohne diese Regel ist die Auswahl selbst schon das Ergebnis — die häufigste stille Verzerrung in veröffentlichten Vergleichen, und die am schwersten erkennbare.
Schritt 3 — Der Aufbau, schriftlich, vorher
Messgeräte, Bedingungen, Dauer, Anzahl der Wiederholungen — festgelegt, bevor gemessen wird. Wer den Aufbau während der Messung ändert, weil die Werte nicht gefallen, produziert das gewünschte Ergebnis.
Schritt 4 — Die Messung
Mindestens drei Wiederholungen, alle Einzelwerte protokolliert, auch die unplausiblen. Ein Ausreißer wird nicht gestrichen, sondern als Ausreißer ausgewiesen — mit dem Hinweis, dass er auftrat.
Schritt 5 — Die Veröffentlichung
Das vollständige Protokoll, einschließlich der Messungen, die nichts Bemerkenswertes ergeben haben. Gerade die sind wichtig: Ein Bereich, in dem sich alle geprüften Geräte gleich verhalten, ist ein Kriterium, nach dem man nicht auswählen muss.
Was ausdrücklich nicht passiert: Kein Anbieter erfährt vor der Veröffentlichung, dass sein Produkt geprüft wurde oder wie es abgeschnitten hat. Eine Vorabinformation eröffnet Einflussnahme, und ein Einwand ist nach der Veröffentlichung genauso gut zu prüfen — dann aber öffentlich nachvollziehbar. Das Verfahren steht auf der Widerspruchsseite.
Wann eine Reihe abgebrochen wird
Wenn sich während der Messung herausstellt, dass der Aufbau die Frage nicht beantworten kann. Das kommt vor und wird dann so veröffentlicht — ein abgebrochener Versuch mit einer Begründung ist ehrlicher und nützlicher als ein Ergebnis, das die Frage nicht trägt.
Zuletzt geprüft: 11. September 2026