Werbewirkung mit der passenden Methode messen und richtig einordnen

Das Wichtigste auf einen Blick

• Jede Wirkungsaussage braucht drei Angaben: Messgröße, Bezugsgruppe und Zeitraum. Fehlt eine davon, ist der Satz nicht gedeckt.
• Für Werbekontakt, Bekanntheit und Erinnerung ist eine Befragung richtig; für Umsatz und Abverkauf ein Vergleich mit Vorperiode, Nachbarregion oder Kontrollgruppe.
• Eine einzelne Kennzahl aus einer Kampagnenstudie beschreibt diese Kampagne, nicht Ihren Markt. Solche Werte sind kein Benchmark.
• Zwei Fehlerquellen begrenzen jede Aussage: unklare Fragen und systematische Ausfälle. Beide lassen sich abschätzen, aber nicht wegdiskutieren.

Warum eine Zahl ohne Bezugsrahmen keine Wirkung belegt

Die Frage hinter allen Wirkungsnachweisen ist unspektakulär: Was wäre ohne die Werbung passiert? Genau diese Gegenwelt fehlt, wenn Sie nur einen Wert nach der Kampagne kennen. Ein Umsatzplus von zwölf Prozent ist erst dann ein Wirkungsindiz, wenn Sie wissen, wie sich der Vergleichsraum im selben Zeitraum entwickelt hat.

Deshalb beginnt jede belastbare Messung mit einer Formulierung Ihrer Behauptung. Sagen Sie nicht, die Aktion habe gewirkt. Sagen Sie, der Absatz der beworbenen Produktgruppe in den Testfilialen sei von Monat zu Monat um X Prozent gestiegen, während die Vergleichsfilialen um Y Prozent zulegten. Erst dieser Satz nennt Messgröße, Bezugsgruppe und Zeitraum.

Aus dieser Formulierung folgt die Methode. Wer Kontakt, Bekanntheit oder Erinnerung behauptet, braucht Menschen, die antworten. Wer Abverkauf behauptet, braucht Verkaufsdaten und eine Vergleichsbasis. Wer beides behauptet, braucht beides. Ein einzelner Kanal lässt sich nicht mit einem einzelnen Datenpunkt belegen.

Ein Beispiel für eine Kampagnenkennzahl liefert die CMC Print-Mailing-Studie 2026. Sie wertete reale Kampagnen von 35 Online-Shops mit knapp 859.000 Print-Mailings an Bestandskundschaft zwischen September 2025 und Februar 2026 aus. Ausgewiesen werden unter anderem 4,0 Prozent durchschnittliche Conversion Rate und ein ROAS von 961 Prozent im Kampagnenzeitraum.

Was diese Zahlen sagen: In den teilnehmenden Shops kam auf die Sendungen messbar Reaktion. Was sie nicht sagen: dass dieselbe Sendung in Ihrem Sortiment dieselbe Wirkung hat. Es sind Angaben aus Kampagnen dieser 35 Shops, keine Marktdurchschnitte. Auch die Langzeitwirkung ist ein Kampagnenbefund: 46 Prozent aller durch Print-Mailings ausgelösten Bestellungen gingen erst ab der fünften Woche nach Versand ein.

Bekanntheit und Erinnerung erheben

Wer nach Bekanntheit fragt, muss zuerst entscheiden, welche Bekanntheit gemeint ist. Spontane Nennung misst etwas anderes als Wiedererkennen an einer Liste. Beide Fragen dürfen Sie nacheinander stellen, aber nicht vermischen. Die offene Frage kommt zuerst, die gestützte danach.

Der Fragebogen selbst ist eine Fehlerquelle. Nach den GESIS Survey Guidelines zur Frageformulierung durchlaufen Befragte vier kognitive Aufgaben: Sie verstehen die Frage, rufen Informationen ab, bilden ein Urteil und bringen es in ein Antwortformat. Jede dieser Aufgaben fällt leichter oder schwerer, je nachdem wie der Fragetext gebaut ist.

Praktisch heißt das für Ihre Bekanntheitsfrage: keine Abkürzungen, keine unbestimmten Zeitangaben wie kürzlich, keine doppelten Sachverhalte in einer Aussage und überlappungsfreie Antwortkategorien. Wer fragt, ob ein Kunde kürzlich eine Aktion gesehen hat, bekommt Antworten über Tage, Wochen und Monate gemeinsam.

Ein zweites Problem entsteht durch die Auswahl der Befragten. Bei Online-Befragungen bestehen nach Bandillas Überblick über Online-Befragungen zwei Kernprobleme: die Deckungslücke zwischen angestrebter Grundgesamtheit und erreichbarer Population sowie die Stichprobenziehung. Wer nur über einen Kundenverteiler befragt, erreicht keine repräsentative Bevölkerung.

Für eine Kampagnenmessung ist das kein Ausschlusskriterium, aber es begrenzt die Aussage. Sie dürfen dann formulieren, dass sich die Bekanntheit unter den angeschriebenen Bestandskunden erhöht hat. Sie dürfen nicht formulieren, dass die Marke bekannter geworden ist. Der Unterschied liegt in der Grundgesamtheit, nicht in der Formulierungskunst.

Bevor Sie ins Feld gehen, legen Sie den Erhebungszeitpunkt fest. Eine Messung vor Versand und eine nach Versand sind zwei Stichproben, nicht eine. Wer beide Wellen mit unterschiedlich langen Feldzeiten erhebt, misst auch Zeit und nicht nur Werbung.

Abverkauf vergleichen und Störgrößen erfassen

Beim Abverkauf liegen die Daten vor, aber die Vergleichsbasis fehlt oft. Bauen Sie sie bewusst auf. Zwei Wege sind üblich: der Vorjahreszeitraum oder eine strukturell ähnliche Region, die nicht beworben wurde. Beide haben Schwächen, beide sind besser als nichts.

Führen Sie Absatz und Umsatz getrennt. Ein Umsatzplus kann aus höheren Preisen stammen, ein Absatzplus aus einer Rabattaktion. Wenn Sie eine Preiserhöhung zum Kampagnenstart vornehmen, ist der Effekt vermischt. Das lässt sich später nicht mehr rechnerisch trennen.

Dokumentieren Sie Störgrößen parallel zur Kampagne, nicht danach. Saisonverlauf, Wetterlagen, Feiertage, Sortimentsänderungen und Aktionen von Wettbewerbern gehören in dieselbe Tabelle wie Ihre Reichweitenwerte. Eine nachträglich rekonstruierte Erklärung ist eine Vermutung, keine Dokumentation.

Ein Rechenbeispiel, bewusst als Beispiel gekennzeichnet: Angenommen, eine Filialgruppe steigert den Absatz von 1.000 auf 1.100 Einheiten, also plus 10 Prozent. Die Vergleichsgruppe steigert sich von 2.000 auf 2.060 Einheiten, also plus 3 Prozent. Dann beträgt die Differenz der Veränderungen sieben Prozentpunkte. Diese Zahl ist Ihre Wirkungsschätzung, nicht die 10 Prozent der Testgruppe.

Der zweite CMC-Befund zeigt, warum Segmentierung die Interpretation verändert. Der durchschnittliche Bestellwert stieg nach dem Mailing von 95,21 Euro auf 118,79 Euro, das sind plus 24,8 Prozent. Bei den Top-Kunden lag die Conversion Rate bei 8,3 Prozent, bei Gelegenheitskunden bei 2,1 Prozent. Bei umsatzschwächeren Kunden hob ein höherer Gutscheinwert die Conversion Rate um 33 Prozent; bei Top-Kunden senkte ein niedrigerer Gutschein die Kosten und hob den ROAS auf 575 Prozent.

Diese Segmentwerte sind Kampagnenergebnisse aus dem Studienkollektiv der 35 Shops, keine mechanisch übertragbare Regel. Sie zeigen aber den methodischen Punkt: Ein Gesamtdurchschnitt kann zwei gegenläufige Effekte verdecken. Wer nur den Gesamtwert berichtet, hat eine Zahl, aber keine Erklärung.

Und wer Reichweite als Wirkung ausgibt, verwechselt Kontakt mit Reaktion. Die IVW-Auflagenstatistik für das zweite Quartal 2026 erfasste unter anderem 312 Tages- und 16 Wochenzeitungen sowie 437 Publikumszeitschriften unter Auflagenkontrolle. Solche Zahlen belegen die geprüfte Verbreitung eines Titels. Über die Wirkung einer konkreten Anzeige sagen sie nichts.

Mit Kontrollgruppe den Unterschied der Veränderungen rechnen

Die sauberste Variante ist ein Testgebiet gegen ein Kontrollgebiet mit ähnlicher Struktur, Größe und Kaufkraft. Ob die Gebiete vergleichbar sind, prüfen Sie vor der Kampagne anhand vergangener Absatzzahlen, nicht nachher anhand des Ergebnisses.

Wichtig ist die Zufallszuteilung, soweit sie praktisch möglich ist. In experimentellen Designs ist die Randomisierung zentral, während die Auswahl der Befragten in den Hintergrund tritt. Verlassen Sie sich nicht darauf, dass eine willkürliche Gebietswahl schon ausgleicht, was sie nicht ausgleicht.

Die Auswertung folgt einem Vier-Felder-Schema:

Gruppe	Vorher	Nachher	Veränderung
Testgebiet	1.000 Einheiten	1.100 Einheiten	plus 10 Prozent
Kontrollgebiet	2.000 Einheiten	2.060 Einheiten	plus 3 Prozent
Differenz der Veränderungen			plus 7 Prozentpunkte

Die Annahmen dieses Beispiels: vergleichbare Sortimente, keine parallele Sonderaktion, identischer Kampagnenzeitraum, ausreichende Fallzahlen in beiden Gebieten. Verletzt eine Annahme, verschiebt sich die Schätzung. Bei kleinen Fallzahlen ist die Aussagekraft zusätzlich begrenzt, und das gehört in den Bericht.

Dass eine Kontrollgruppe nicht automatisch ein sauberes Ergebnis liefert, zeigt die Ausfallproblematik. Der Nonresponse Bias eines Mittelwerts ergibt sich nach Koch und Blohm aus der Nonresponse Rate multipliziert mit der Differenz zwischen den Mittelwerten von Teilnehmern und Nichtteilnehmern. Der Bias ist merkmalspezifisch: Eine hohe Ausschöpfung allein sagt nichts darüber, ob gerade die Variable verzerrt ist, die Sie interessiert.

Übertragen auf Ihre Wirkungsmessung: Wenn vor allem zufriedene Bestandskunden auf die Nachbefragung antworten, ist die gemessene Bekanntheit verzerrt, auch wenn die Rücklaufquote ordentlich aussieht. Und in der CMC-Studie war jede Response einem Kundensegment zugeordnet, wodurch überhaupt erst auswertbar wurde, welche Segmentgruppe wie reagiert hat. Diese Zuordnung ist der eigentliche methodische Aufwand, nicht die Kampagne.

Welche Aussage welche Erhebung braucht

Die folgende Übersicht ordnet Aussageformen den nötigen Daten zu. Sie ist eine Arbeitshilfe, keine Vorschrift.

Aussage	Benötigte Erhebung	Zusätzlich nötig	Häufige Fehlerquelle
Bekanntheit ist gestiegen	Befragung vor und nach Versand	gleiche Frage, gleiche Population	Frage geändert, Zeitrahmen geändert
Absatz ist gestiegen	Abverkaufsdaten zweier Zeiträume	Saisonreferenz, Wettbewerbsbeobachtung	Preis- und Mengeneffekt vermischt
Die Kampagne hat sich gerechnet	Absatz, Kosten, Warenkorb, Zeitfenster	vollständige Kostenzuordnung	nur Rohertrag ohne Medienkosten
Kontakt wurde erzielt	Auslieferung, Zustellung, Öffnungen	geprüfte Verteilmenge	Verwechslung mit Reaktion
Erinnerung an die Aktion	gestützte und ungestützte Frage	Abstand zur Kampagne	Erinnerung mit Bekanntheit verwechselt

Formulieren Sie jede Zeile als Satz mit Zeitraum und Bezugsgruppe, bevor Sie Daten erheben. Dann merken Sie schnell, welche Angabe Ihnen fehlt. Und halten Sie den Wortlaut fest, den Sie veröffentlichen wollen, solange die Zahlen noch nicht vorliegen.

Häufige Fragen

Reicht eine Nachher-Messung für einen Wirkungsnachweis?

Nein. Ohne Vergleichsgröße fehlt die Gegenwelt. Sie können einen Zustand beschreiben, aber keine Veränderung und erst recht keinen Ursachenzusammenhang behaupten. Mit Vorjahreswert oder Kontrollgebiet wird aus der Beschreibung eine begründete Schätzung.

Darf ich eine Kampagnenkennzahl aus einer veröffentlichten Studie als Benchmark nennen?

Nur mit Quelle und Einordnung. Der ROAS von 961 Prozent aus der CMC Print-Mailing-Studie 2026 gilt für den Kampagnenzeitraum der 35 teilnehmenden Online-Shops. Wer ihn als Marktdurchschnitt präsentiert, verändert die Aussage der Quelle. Nennen Sie Erhebung, Kollektiv und Zeitraum mit.

Wie gehe ich mit einer niedrigen Antwortquote um?

Nennen Sie die Quote, die Grundgesamtheit und die Grenze der Aussage. Eine niedrige Quote allein macht ein Ergebnis nicht unbrauchbar, sie verschiebt nur die Beweislast. Berichten Sie lieber den engeren Gültigkeitsbereich als eine Zahl, die mehr verspricht, als die Erhebung deckt.