Beratung im Bereich unternehmerischer Experimente

Wir benennen die Annahme, auf der Ihr Plan am stärksten beruht, entwerfen den kleinsten Test, der sie widerlegen könnte, und legen vor der Durchführung fest, welches Ergebnis die Frage endgültig klären würde.

Hintergrund des Service-Kopfbereichs L

Die Beratung im Bereich Business-Experimentierung klärt strategische Fragen anhand von Marktdaten statt durch Diskussionen hinter verschlossenen Türen. Wir helfen einem Team dabei, die Annahme zu benennen, die eine Idee zunichte machen würde, sollte sie sich als falsch erweisen, den kleinsten Test zu entwerfen, der sie widerlegen könnte, und sich vor Beginn des Tests darauf zu einigen, welches Ergebnis die Diskussion beenden würde. „ Vivaldi “ hat Innovationspipelines aufgebaut und neue Geschäftsmodelle für Unternehmen wie O2, Allianz, Wrigley, McGraw-Hill, Takeda und Anheuser-Busch validiert.

  • Seit 1999Nachfrage, Innovation und Geschäftsmodellstrategie
  • Über 200veröffentlichte Fallstudien
  • 10 Niederlassungenauf vier Kontinenten
  • 5xWirtschaftsWoche: Das Beste aus den Bereichen Beratung, Strategie und Innovation
  • Der Interaction Fieldverfasst von unserem Gründer

Wenn Unternehmen uns beauftragen

Geschäftliche Experimente werden in der Regel von einem Chief Strategy Officer, einem Innovationsleiter oder einem Wachstumsverantwortlichen initiiert, der mehr Ideen als Budget hat und keine zuverlässige Möglichkeit besitzt, diese voneinander abzugrenzen. Der Auslöser ist fast immer einer der folgenden.

  • Ein Plan, der auf einer unhinterfragten Annahme beruht. Das Geschäftsmodell funktioniert, und zwar aufgrund einer Annahme, die noch niemand vor einem Käufer getestet hat.
  • Untersuchungen, die bestätigten, was bereits beschlossen war. Eine Studie ergab positive Ergebnisse, die Markteinführung fand trotzdem statt, und das Ergebnis auf dem Markt entsprach in keiner Weise der Präsentation.
  • Tests, die nie enden. Das Unternehmen führt zahlreiche Aktivitäten durch, die als Tests bezeichnet werden, und noch nie wurde ein Projekt deswegen eingestellt.
  • Eine Entscheidung zwischen Konzepten, die auf dem Papier gleichermaßen gut aussehen. Vier Vorschläge, ein Budget – und die Entscheidung fällt aufgrund der Überzeugung.
  • Ein neues Modell, dessen Wirtschaftlichkeit noch nicht erwiesen ist. Die Frage nach der Nachfrage scheint geklärt zu sein, nicht jedoch die Frage, ob jemand bereit ist, den Preis zu zahlen, den das Modell erfordert.

Warum die meisten Experimente in Unternehmen nichts bewirken

Fast jedes große Unternehmen führt Tests durch. Nur wenige führen Experimente durch, und der Unterschied besteht darin, ob das Ergebnis auch anders hätte ausfallen können.

Ein häufiger Fehler besteht darin, dass der Test erst dann konzipiert wird, wenn die Entscheidung faktisch bereits gefallen ist. Es wird ein Konzept entwickelt, der Business Case verfasst und eine Studie in Auftrag gegeben, um dieses zu untermauern. Wenn das Ergebnis dann mehrdeutig ausfällt – was in der Regel der Fall ist –, wird das Projekt dennoch fortgesetzt. Da kein Risiko bestand, wurden auch keine Erkenntnisse gewonnen.

Darunter befinden sich drei weitere spezifische Muster.

  • Die falsche Annahme wird überprüft. Teams testen eher das, was sich am einfachsten messen lässt, als das, was das Projekt zum Scheitern bringen würde, sollte es sich als falsch erweisen. Die Attraktivität lässt sich leicht messen. Die Zahlungsbereitschaft ist schwieriger zu ermitteln, daher wird die Attraktivität getestet, während die schwierigere Frage erst bei der Markteinführung geklärt wird.
  • Der Test ist zu groß, um widerlegt zu werden. Ein Marktpilotprojekt, das ein Viertel kostet und Personal erfordert, ist nichts anderes als ein Soft Launch im Laborkittel. Es kommt zu spät und kostet zu viel, als dass man es als Fehlschlag bezeichnen könnte.
  • Die Reihenfolge spielt keine Rolle. Wenn fünf Tests zu einem Thema parallel durchgeführt werden, entsteht ein Durcheinander. Die Reihenfolge ist wichtiger als die Anzahl, denn die Antwort auf die erste Frage macht in der Regel drei der anderen überflüssig.

Das Fachgebiet ist eng gefasst. Man ermittelt die Annahme, die am ehesten falsch sein dürfte, entwirft den kleinsten Test, der sie widerlegen könnte, führt diesen als Erstes durch und notiert, wie sich das Ergebnis dadurch verändert hat. Der größte Teil des Nutzens ergibt sich daraus, dass ein Programm frühzeitig abgebrochen wird – und genau das ist es, was große Organisationen am wenigsten zu honorieren wissen. Wie große Probleme tatsächlich gelöst werden, hängt mehr von der richtigen Abfolge der Fragen ab als vom Umfang der darauf angewandten Analysen.

Was unsere Beratungsleistungen im Bereich Geschäftsversuche umfassen

Fünf Arbeitsschritte. Bei den meisten Aufträgen werden alle in dieser Reihenfolge durchgeführt.

1. Ermittlung der Annahme, die das Risiko birgt

Jede neue These beruht auf einer Vielzahl von Annahmen, und nur wenige davon entscheiden darüber, ob sie funktioniert.

  • Eine schriftliche Auflistung der Faktoren, von denen die Idee abhängt, unterteilt in Nachfrage, Zahlungsbereitschaft, Lieferung und Vermarktungsweg
  • Eine Einschätzung, welche davon sowohl entscheidend als auch wirklich ungewiss sind – eine Liste, die viel kürzer ist, als die Teams erwarten
  • Diese Annahme belegte den ersten Platz, weil sie kostengünstig zu überprüfen ist und fatale Folgen hat, wenn sie falsch ist – und nicht, weil das Team gerne darüber diskutiert.

2. Entwurf des kleinsten Tests, der die Hypothese widerlegen könnte

Ein Test rechtfertigt seine Kosten durch die Entscheidung, zu der er führen kann; daher gehen wir bei der Entwicklung rückwärts von dieser Entscheidung aus.

  • Das je nach Risiko gewählte Instrument: ein Gespräch mit dem Käufer, ein Preisangebot, ein Landing-Test, ein einzelnes Geschäft oder ein begrenzter Testlauf auf dem Live-Markt
  • Eine Stichprobe und eine Dauer, die auf die jeweilige Behauptung abgestimmt sind und nicht auf das verfügbare Budget
  • Ein Versuch, dessen Scheitern man sich leisten kann, denn ein Experiment, dessen Scheitern sich niemand leisten kann, ist ein Projekt mit einem eigenen Forschungsposten

3. Konzepttests mit Personen, die das Produkt tatsächlich kaufen würden

Konzepttests funktionieren, wenn das Risiko in der Nachfrage liegt, und sie scheitern, wenn das Konzept eher als Nutzenversprechen denn als Verkaufsobjekt beschrieben wird.

  • Das Angebot, so wie es verkauft werden würde, mit dem Preis, den Vor- und Nachteilen und dem Namen des Produkts, das es ersetzt
  • Preis- und Werttests, die eine Verpflichtung erfordern, da bekundetes Interesse und ein unterzeichneter Auftrag unterschiedliche Arten von Daten sind
  • Nichtkäufer wurden bewusst einbezogen, da diejenigen, die ablehnen, die Obergrenze besser erklären als die Befürworter die Chance.

4. Im Voraus festlegen, wie das Ergebnis aussehen soll

Ein unklares Ergebnis ist die übliche Folge eines nicht näher spezifizierten Tests, und es wird stets so ausgelegt, dass die Behandlung fortgesetzt wird.

  • Ein vor der Testausführung festgelegter Schwellenwert: die Zahl, das Verhalten oder die verbindliche Zusage, die als bestanden gilt
  • Da die Auswertung eines Beinaheunfalls zeitgleich vereinbart wurde, kann ein knappes Ergebnis im Nachhinein nicht in ein „Ja“ umgedeutet werden.
  • Die Beweisstandards werden ausdrücklich dargelegt, einschließlich dessen, was der Test nicht aussagen kann – was in der Regel genau der Teil ist, der später zitiert wird

5. Ein Ergebnis als Entscheidung werten

Ein Ergebnis, das niemand dokumentiert, ist ein Ergebnis, für dessen erneute Ermittlung das Unternehmen Kosten tragen muss.

  • Ein Protokoll für jeden Test, aus dem hervorgeht, was angenommen wurde, was durchgeführt wurde, welche Ergebnisse erzielt wurden und was sich infolgedessen geändert hat
  • Die Ergebnisse werden an die Personen weitergeleitet, die über die Mittelvergabe entscheiden, und nicht nur an das Team, das den Test durchgeführt hat
  • Ein sichtbares Verzeichnis dessen, was widerlegt wurde; daher muss eine Idee, die bereits gescheitert ist, mit neuen Belegen aufwarten und nicht mit einem neuen Förderer
  1. FrageWelche Annahme entscheidet darüberDie Annahme, die das Projekt beenden würde, wenn sie falsch wäre, und nicht die, die am einfachsten zu messen istWird normalerweise übersprungen
  2. EntwurfEin Test, der ein negatives Ergebnis liefern könnteDas kleinste Instrument, das die Annahme widerlegen könnte, und zwar so dimensioniert, dass ein negatives Ergebnis tragbar istMeistens zu sicher
  3. LesenWas das Ergebnis aussagtEine vor Beginn der Tests festgelegte Bestehenschwelle, sodass ein Grenzwert nicht als „Ja“ interpretiert werden kannIn der Regel mehrdeutig
  4. EntscheidenWas sich dadurch ändertWeitermachen, umgestalten oder aufhören – schriftlich festgehalten mit den Belegen, die die Entscheidung begründet habenWird in der Regel nicht dokumentiert
Ohne Rückmeldung taucht dieselbe Frage im nächsten Planungszyklus mit denselben Argumenten erneut auf.
Der Kreislauf bricht an der letzten Stelle ab. Unternehmen mangelt es selten an Aktivitäten, die als „Tests“ bezeichnet werden. Was fehlt, ist ein vor dem Test vereinbarter Schwellenwert und eine anschließende Dokumentation – weshalb das Unternehmen zweimal dafür bezahlt, dieselbe Erkenntnis zu gewinnen.

Du bist dir nicht sicher, welche Annahme du zuerst testen sollst?

Beginnen Sie mit einer Arbeitssitzung mit einem unserer Partner. Wir nehmen Ihren bestehenden Plan zur Hand, ermitteln die Annahme, auf der er am stärksten basiert, und legen dann den kleinsten Test fest, mit dem sich diese Annahme klären lässt.

Buchen Sie eine Überprüfung Ihrer Experimente

So funktioniert ein Projekt zur geschäftlichen Experimentierung

  1. Legen Sie die Annahmen offen. Wir nehmen das Konzept, den Plan oder den Business Case in seiner vorliegenden Form und ermitteln – in den eigenen Worten des Teams – die Faktoren, von denen es abhängt, unterteilt in Nachfrage, Preis, Lieferung und Markteinführung.
  2. Nach Risiko ordnen. Jede Annahme wird danach bewertet, wie unsicher sie tatsächlich ist und inwieweit die Argumentation zusammenbricht, wenn sie falsch ist. Das Ergebnis ist eine Annahme, die zuerst geprüft werden soll, wobei die Begründung sichtbar ist, damit die Wahl einer Überprüfung standhält.
  3. Entwerfen und durchführen. Das kleinste Instrument, mit dem sich die Hypothese widerlegen ließe, wobei der Schwellenwert vor Beginn der Feldforschung festgelegt wird; die Untersuchung sollte mit echten Käufern durchgeführt werden und nicht mit einer Ersatzgruppe.
  4. Entscheiden und protokollieren. Ein Messwert im Vergleich zum Schwellenwert, eine Entscheidung, ob fortgefahren, umgestaltet oder abgebrochen werden soll, sowie eine Dokumentation, anhand derer Ihre Teams den nächsten Test ohne unsere Hilfe durchführen können.

Warum sich Unternehmen für „ Vivaldi “ entscheiden, um geschäftliche Experimente durchzuführen

Die meisten Unternehmen, die Experimentierlösungen anbieten, lassen sich einer von zwei Bereichen zuordnen: entweder einem Forschungsinstitut, das Reaktionen misst, oder einer Agentur für digitale Optimierung, die Webseiten optimiert. Beide sind nützlich, doch keines von beiden gibt eine Antwort darauf, ob ein Angebot überhaupt sinnvoll ist.

Wir gehen von der Nachfrage aus. Unsere Arbeit beginnt damit, was die Kunden erreichen wollen – und genau das macht den Unterschied zwischen einem Konzept, das in Tests gut abschneidet, und einem Konzept, das tatsächlich gekauft wird. Das bedeutet, dass die Annahmen, die wir ganz oben auf die Liste setzen, in der Regel kommerzieller Natur sind: ob der Bedarf tatsächlich besteht, ob jemand den vom Modell geforderten Preis zahlen wird und ob es einen Weg auf den Markt gibt.

Wir entwickeln auch Tests, bei denen wir damit rechnen, dass sie teilweise fehlschlagen. Ein Unternehmen, das niemals ein negatives Ergebnis liefert, führt keine Experimente durch, und ein Programm, das daran gemessen wird, wie viele Ideen es genehmigt, wird diese auch genehmigen.

So bewerten Sie einen Berater für geschäftliche Experimente

Das sollten Sie jedem Unternehmen auf Ihrer Liste mitteilen – auch uns.

  • Fragen Sie, was sie als Erstes testen würden und warum gerade das. Ein Unternehmen, das mit einem Forschungsplan statt mit einer einzelnen Annahme antwortet, verkauft Ihnen ein Gefühl der Sicherheit. Eine sinnvolle Antwort nennt genau das, was das Projekt beenden würde, sollte sich diese Annahme als falsch erweisen.
  • Fragen Sie, wie klein sie es gestalten können. Erfahrene Praktiker messen sich daran, wie wenig Aufwand sie betreiben müssen, um etwas Entscheidendes zu lernen, und nicht daran, wie umfangreich die Feldforschung ist.
  • Fragen Sie, ob die Zahlungsbereitschaft getestet wird. Die Attraktivität lässt sich leicht messen, hat aber nur eine geringe Vorhersagekraft. Eine Zusage zu erhalten ist schwieriger, sagt aber wesentlich mehr aus.
  • Fragen Sie, bei welchem Ergebnis sie Ihnen sagen würden, dass Sie aufhören sollen. Wenn es vor dem Test keine Antwort darauf gibt, wird es auch danach keine geben.
  • Fragen Sie, wer das zweite Experiment durchführt. Lautet die Antwort „die Beratungsfirma“, dann haben Sie eine Studie gekauft. Ein Programm hinterlässt eine Methode, die Ihre eigenen Teams anwenden können, ohne eine Bestellung aufgeben zu müssen.

Geschäftliche Experimente vs. A/B-Tests vs. Marktpilotprojekte?

Kriterium Geschäftliche Experimente A/B-Tests Marktpilot
Was diese Frage beantwortet Ob die These und die damit verbundenen wirtschaftlichen Überlegungen überhaupt zutreffen Welche Version einer bestehenden Experience erzielt bessere Ergebnisse? Wie man etwas umsetzt, das bereits beschlossen wurde
Wenn es passt Bevor das Ding existiert, solange der Fall noch eine Reihe von Überzeugungen ist Nach dem Start, wenn das Datenaufkommen hoch und die Änderung gering ist Nach der Entscheidung, wenn die Umsetzung noch offen ist
Kann es „Nein“ zurückgeben? Ja, und der Schwellenwert dafür wird im Voraus vereinbart. Ja, innerhalb des engen Bereichs, der variiert wird Selten, da die Zusage bereits gegeben wurde
Typische Kosten eines Fehlers Ein paar Wochen Arbeit und ein eingestelltes Projekt Eine rückgängig gemachte Bereitstellung Ein Quartal, ein Team und ein Start, den niemand absagen will
Wer leitet das? Strategie, Innovation und Vertrieb unter einem Dach Produkt, Wachstum und Analytik Das operative Geschäft

Verwandte Arbeiten

Zwei miteinander verbundene Funktionen in der Reihenfolge, in der sie normalerweise auftreten, sowie die Gruppe, zu der diese Methode gehört.

  • Venture-Design Sobald ein Konzept die ersten Tests überstanden hat, stellt sich die Frage, was das Ganze eigentlich ist.
  • Unternehmensinteresantes Venture-Building wenn das Geschäftsmodell bewährt ist und die Herausforderung darin besteht, ein neues Unternehmen innerhalb eines Mutterkonzerns aufzubauen.
  • Innovation im Geschäftsmodell wenn der unsichere Teil das Modell selbst ist und nicht das Angebot, das dem Kunden unterbreitet wird.
  • Experimente und Unternehmungen zu der Frage, die auf dieser Seite nicht beantwortet wird: Wie viel muss man ausgeben, um herauszufinden, welche Einsätze als Set gelten und wann jeder einzelne endet?

Diese Arbeit ist Teil unseres Geschäftsbereichs „Marketing Strategy & Acceleration“ bei Vivaldi, dem Strategieberatungsunternehmen, das hinter dem „Demand Landscape“ und dem „ Interaction Field “ steht.

Beratung zu geschäftlichen Experimenten in den USA und weltweit

Unsere Experimentierarbeit erfolgt von zehn Standorten auf vier Kontinenten aus, wobei das US-Team in New York ansässig ist. Die Methode lässt sich übertragen, die Erkenntnisse jedoch nicht: Die Zahlungsbereitschaft, die Glaubwürdigkeit einer Aussage und der Weg zum Markt variieren je nach Markt, und ein Konzept, das in einem Land validiert wurde, scheitert im nächsten regelmäßig am Preis oder am Vertriebskanal. Wenn ein Angebot in mehreren Märkten eingeführt werden soll, testen wir zunächst die Annahme, die sich zwischen den Märkten am stärksten unterscheidet – in der Regel ist dies eher der Preis oder der Vertrieb als die Attraktivität.

Gehen Sie zunächst davon aus, dass Sie am wenigsten bereit sind, dies zu testen.

In einer Arbeitssitzung nehmen wir den Plan, zu dem Sie sich bereits verpflichtet haben, benennen die Annahme, auf der er am stärksten beruht, und legen das kleinste Experiment fest, mit dem sich diese Annahme klären lässt. Am Ende wissen Sie, welcher Test als Erstes durchgeführt werden sollte und wie dessen Ergebnis ausfallen müsste.

Buchen Sie eine Überprüfung Ihrer Experimente

Häufig gestellte Fragen zur Beratung im Bereich geschäftlicher Experimente

Was sind Beratungsdienste für Unternehmensexperimente?

Beratungsleistungen, die einem Unternehmen dabei helfen, zu entscheiden, welche seiner Annahmen überprüft werden sollen, Tests zu konzipieren, mit denen diese Annahmen widerlegt werden können, und einen internen Rhythmus zu etablieren, um diese Tests kontinuierlich durchzuführen. Dies umfasst die Erfassung von Annahmen, Konzepttests, Preis- und Zahlungsbereitschaftstests, Tests eines Geschäftsmodells am realen Markt sowie die Entscheidungsprotokolle, mit denen aus einem Ergebnis eine Entscheidung wird.

Was ist der Unterschied zwischen einem Geschäftsexperiment und einem Pilotprojekt?

Ein Pilotprojekt ist eine kleine Version einer bereits beschlossenen Maßnahme, die durchgeführt wird, um die Umsetzung zu erproben. Ein Experiment wird so konzipiert, dass eine bestimmte Annahme widerlegt werden kann, wobei der Schwellenwert, ab dem das Ergebnis als negativ gilt, im Voraus festgelegt wird. Pilotprojekte geben Aufschluss darüber, wie etwas umgesetzt werden kann. Experimente geben Aufschluss darüber, ob etwas funktioniert.

Was ist ein Konzepttest und wann ist dies die richtige Methode?

Beim Konzepttest wird den potenziellen Käufern ein Angebot vorgelegt, das nicht als Aufzählung von Vorteilen, sondern so beschrieben wird, wie es verkauft werden würde, um zu prüfen, ob es Aufmerksamkeit und Interesse weckt. Diese Methode eignet sich besonders, wenn das Risiko in der Nachfrage liegt. Liegt das Risiko hingegen in der Wirtschaftlichkeit der Umsetzung oder im Vermarktungsweg, ist ein Test auf dem realen Markt das bessere Instrument.

Bieten Sie B2B-Experimentierdienstleistungen an?

Ja, und gerade im B2B-Bereich zahlt sich diese Disziplin am meisten aus, da ein langer Verkaufszyklus eine Fehlinvestition jahrelang verbergen kann. Die Methoden unterscheiden sich: Die Stichproben sind kleiner, sodass sich die Tests eher auf strukturierte Gespräche mit Käufern, Preisvereinbarungen und Pilotkunden stützen als auf statistische Signifikanz aus großen Stichproben.

Inwiefern hängt das mit A/B-Tests und digitalen Experimenten zusammen?

A/B-Tests und digitale Experimente dienen der Optimierung bereits bestehender Strukturen und funktionieren besonders gut bei hohem Traffic und geringfügigen Änderungen. Geschäftsexperimente hingegen befassen sich mit Fragen, die sich stellen, bevor überhaupt etwas zu optimieren ist: ob das Angebot überhaupt Nachfrage weckt und ob das Geschäftsmodell bei dem erforderlichen Preis rentabel ist. Unternehmen stehen oft vor dem zweiten Problem, kaufen aber Tools für das erste.

Was sollte eine Beratungsfirma für Experimentiermethoden hinterlassen?

Eine nach Priorität geordnete Liste der Annahmen, auf denen Ihr Plan basiert, die Tests, mit denen die entscheidenden Annahmen überprüft wurden, eine schriftliche Dokumentation der widerlegten Annahmen sowie eine Methode, mit der Ihre eigenen Teams das nächste Konzept umsetzen können, ohne zusätzliche Mitarbeiter einstellen zu müssen. Wenn das einzige nachhaltige Ergebnis ein Bericht ist, haben Sie eher eine Studie als eine Kompetenz erworben.

Welche Vorteile bietet das Experimentieren in der Wirtschaft?

Dadurch sinken die Kosten, die entstehen, wenn man sich irrt. Ein Unternehmen, das eine schwache Idee innerhalb weniger Wochen widerlegen kann, setzt die Mittel anderweitig ein, die es andernfalls ein Jahr lang dafür aufwenden würde, dieselbe Erkenntnis zu gewinnen. Der zweite Vorteil verstärkt diesen Effekt noch: Eine Organisation, die festhält, was sie widerlegt hat, zahlt nicht zweimal für dieselbe Lektion.

Wie lange dauert ein Projekt zur Geschäftsentwicklung?

Die Erfassung und Einstufung von Annahmen ist eine Sache von wenigen Wochen. Ein erster Test wird in der Regel innerhalb der folgenden Wochen konzipiert und durchgeführt, denn es geht ja gerade darum, ein Instrument zu entwickeln, das klein genug ist, um schnell umgesetzt zu werden. Programme, die sich bereits ein Quartal im Voraus festlegen, bevor überhaupt Erkenntnisse vorliegen, sind meist eher auf Komfort als auf die eigentliche Fragestellung ausgelegt.

Inwiefern unterscheidet sich das von Ihrer Arbeit im Bereich „Experimentation and Ventures“?

Auf dieser Seite geht es um die Vorgehensweise: Welche Annahme soll zuerst überprüft werden, wie wird ein Test konzipiert, welche Beweise würden die Frage klären und was gilt als Ergebnis? Die übergeordnete Gruppe „Experimente und Vorhaben“ befasst sich mit der darüber liegenden Frage, nämlich wie viel Geld für die Klärung dieser Frage aufgewendet werden soll, welche Wetten als Paket zusammengefasst werden und wann die einzelnen Wetten beendet werden.