Veröffentlicht am August 02

Experimentieren unter Druck: Wie man in einer Welt der Budgetkürzungen und schnellen Ergebnisse überlebt (und gedeiht)

Die meisten Testprogramme sind in einer wilden Reality-Show namens "Extremes Experimentieren" gefangen: Ausgabe mit gekürztem Budget". Der Schwerpunkt liegt jetzt darauf, schnell einen greifbaren Wert und ROI nachzuweisen. In diesem Blog erfahren Sie, wie Sie Ihr Programm durch datengestützte Entscheidungsfindung wieder auf Kurs bringen können.

Product Experimentation_Teaser_1200x628

Erinnern Sie sich noch an die Zeit, als A/B-Testing so einfach war wie das Ändern einer Schaltflächenfarbe und das Beobachten der Conversions?

Ja, diese Zeiten sind vorbei, genau wie Klapphandys und Internet mit Einwahlverbindung. Im Jahr 2024 sind die meisten Testprogramme in einer wilden Reality-Show namens "Extremes Experimentieren" gefangen: Ausgabe mit gekürztem Budget ".

Der Schwerpunkt liegt jetzt darauf, schnell einen greifbaren Wert und ROI zu demonstrieren. Dieser Wandel bringt einige wichtige Herausforderungen mit sich :

  • Brutale Budgetkürzungen
  • Falsch ausgerichtete Prioritäten
  • Unmöglich knappe Fristen

Die Stärke des Experimentierens liegt jedoch nicht im Programm selbst, sondern in der Art und Weise, wie menschliche Entscheidungsträger die Daten, die es liefert, interpretieren und darauf reagieren.

Lassen Sie uns diese Denkweise des Testens und Lernens annehmen und einige Wege aufzeigen, wie Sie Ihr Programm durch datengestützte Entscheidungsfindung wieder auf Kurs bringen können.

Die Budgetknappheit: Die fiskalischen Hungerspiele überleben

Um Wert zu beweisen, brauchen Sie Ressourcen. Und um mehr Ressourcen zu erhalten, müssen Sie zuerst den Wert nachweisen. Jedes Quartal wird von Ihnen und Ihrem Programm zum Experimentieren erwartet, dass Sie tatsächliche Geschäftsprobleme in Echtzeit lösen.

Hier erfahren Sie, wie Sie das schaffen können:

  1. Bauen Sie diese Beziehungen auf

    Nicht nur zu Ihrem Chef, sondern auch zu anderen Stakeholdern wie dem CFO. Informieren Sie sich umfassend über die Entwicklung Ihres Unternehmens (Entlassungen, Kürzungen, Marktdruck, vierteljährliche Prognosen und Aktivitäten der Konkurrenz). Je mehr Informationen Sie sammeln, desto besser können Sie Ihre Bemühungen zum Experimentieren positionieren.

    Steht Ihr Unternehmen beispielsweise unter dem Druck, die Kundenabwanderung zu verringern? Geben Sie Experimenten zur Kundenbindung Vorrang.

    increase retention test template

    Bildquelle: Optimizely

    Kennen Sie Ihre Stakeholder

    Beginnen Sie damit, herauszufinden, wer wer ist, welchen Einfluss er hat und wie er zum Experimentieren steht. Stellen Sie sicher, dass Sie den Wert des Experimentierens in einer Vielzahl von Formaten kommunizieren, die auf Ihr Targeting zugeschnitten sind (Beispiel: Team-Updates, E-Mails, Meeting-Updates und mehr)

    Beispiel:

    • Für die C-Suite: Dieses Programm hat den Umsatz im letzten Quartal um X% gesteigert.
    • Für das Entwicklungsteam: Wir haben die Anzahl der Fehlerberichte durch systematische Tests um Y% reduziert.
    • Für die Personalabteilung: Unser letzter Test hat die Mitarbeiterzufriedenheit um Z Punkte verbessert.
  2. Setzen Sie auf wertorientierte Budgetierung

    Jeder Dollar muss seine Existenz rechtfertigen. Es geht nicht nur darum, Kosten zu sparen, sondern auch darum, die Wirkung zu maximieren.

    Bevor Sie einem Experiment grünes Licht geben, schätzen Sie seinen potenziellen Wert in Zahlen ab, und zwar in Form von prognostizierten Umsatzsteigerungen, Kosteneinsparungen oder einer Verbesserung der Conversion Rate.

    Legen Sie Mindestschwellen für Experimente fest und teilen Sie das Budget dynamisch auf der Grundlage des nachgewiesenen Nutzens zu.

    value base budgeting image

    Bildquelle: Sketch Bubble
  3. Prioritäten setzen, Prioritäten setzen, Prioritäten setzen

    Setzen Sie Prioritäten, als ob der Erfolg Ihres Programms davon abhinge (denn das tut er). Ihr Programm sollte eine Mischung aus schnellen Tests für sofortige Gewinne und längerfristigen Experimenten für nachhaltigen Erfolg sein.

    Beginnen Sie mit einfachen, schnellen Tests, um eine Dynamik aufzubauen und den Wert zu beweisen. Führen Sie dann komplexe Experimente durch, wenn Sie Glaubwürdigkeit erlangen, um eine große Wirkung zu erzielen.

    Sie können sogar kreativ werden. Verwenden Sie alte Tests neu, holen Sie mehr Erkenntnisse aus vorhandenen Daten heraus und betrachten Sie jede Ressource als potenzielles Testinstrument.

Die Zeit drängt:Maximierung der Testeffizienz in der Eile

Wenn "Ich brauche es gestern" zum Mantra Ihres Chefs wird, ist es an der Zeit, jedes Erlebnis zu optimieren. Hier erfahren Sie, wie Sie mehr Produktivität aus Ihrem Tag herauskitzeln können:

  1. Rationalisieren Sie Ihre Prozesse

    Überprüfen Sie Ihre Arbeitsabläufe beim Experimentieren und eliminieren Sie unnötige Schritte. Ersetzen Sie Statusbesprechungen durch gemeinsame Dashboards, verwenden Sie Vorlagen für gemeinsame Experimente und automatisieren Sie Benachrichtigungen über die Ergebnisse. Ihr Ziel ist ein schlanker, effizienter Arbeitsablauf, der das Durcheinander durchbricht.

  2. Machen Sie sich schnelle Tests zu eigen

    Nutzen Sie Ansätze wie Painted Door Tests , um Ideen schnell zu validieren, bevor Sie sie in vollem Umfang entwickeln. Fügen Sie Ihrer Site eine Schaltfläche für eine noch nicht existierende Funktion hinzu - wenn jemand darauf klickt, haben Sie vielleicht etwas gefunden. Diese Methode kann wochenlange Entwicklungszeit für unrentable Ideen sparen.

    Denken Sie daran... So schnell wie möglich, so langsam wie nötig.

  3. Statistische Signifikanz

    Schnelligkeit ist zwar wichtig, aber vergessen Sie nicht die statistische Signifikanz. Legen Sie klare Mindeststichprobengrößen für verschiedene Testarten fest, verwenden Sie sequenzielle Testmethoden, um Tests möglicherweise früher abzuschließen, und wägen Sie die Kosten einer falschen Entscheidung gegen den Vorteil eines schnellen Vorgehens ab.

    Statistical significance calculator image

    Bildquelle: Optimizely

    Indem Sie Ihre Prozesse straffen und schnelle Tests unter Beibehaltung der statistischen Validität durchführen, gewinnen Sie blitzschnell Erkenntnisse, ohne die Qualität zu beeinträchtigen.

Wenn Priorisierungsmatrizen auf die Realität treffen

Manchmal wird Ihre sorgfältig ausgearbeitete Roadmap von der HIPPO (Highest Paid Person's Opinion) im Raum unterwandert.

Machen Sie sich zunächst klar, dass HIPPOs nicht von Natur aus böse sind. Sie werden oft angetrieben durch:

  • Druck von Interessengruppen
  • Markttrends, die sie beobachtet haben
  • Bauchgefühl aufgrund von Erfahrungen

Ihre Aufgabe ist es, diese Instinkte der Führungskräfte in überprüfbare Hypothesen zu übersetzen. Um dies effektiv zu tun, sollten Sie "HIPPO-freundliche" Faktoren in Ihren Priorisierungsrahmen einbeziehen. Berücksichtigen Sie Elemente wie die strategische Ausrichtung, das Interesse der Geschäftsleitung und den potenziellen PR-Wert. Indem Sie Ihre Experimente in diesem Sinne gestalten, kämpfen Sie nicht gegen den Einfluss des HIPPO - Sie sorgen dafür, dass Ihre Experimente mit den Geschäftszielen übereinstimmen und gleichzeitig den Prioritäten der Geschäftsleitung gerecht werden.

Hier erfahren Sie, wie Sie weiter auf Kurs bleiben:

  1. Beherrschen Sie die Kunst der diplomatischen Zurückweisung

    Wenn Sie mit einer neuen Idee konfrontiert werden, sagen Sie nicht einfach nein. Sagen Sie stattdessen:

    • Hören Sie zu, um zu testen, nicht um abzulehnen: Stellen Sie sicher, dass Sie die Anfrage gehört und vollständig verstanden haben.
    • Erkennen Sie das Potenzial der Idee an: Ich freue mich, dass Sie diese Idee mit uns teilen. Wie passt sie Ihrer Meinung nach in unsere aktuelle Strategie?
    • Stimmen Sie sie mit den Zielen ab: Wie wäre es, wenn wir die Idee so abändern , dass sie besser zu unseren Q3-Zielen passt?
    • Ein Pilotprojekt vorschlagen: Schlagen Sie einen Test in kleinem Maßstab vor, um die Idee zu validieren, bevor wir uns voll engagieren.
    • Präsentieren Sie datengestützte Alternativen: Haben Sie diesen Ansatz in Betracht gezogen? Unsere Daten deuten darauf hin, dass damit ähnliche Ziele mit weniger Ressourceneinsatz erreicht werden könnten.

    Es geht nicht ums Gewinnen. Es geht darum, den besten Weg nach vorn zu finden. Manchmal bedeutet das, sich in der Mitte zu treffen.

  2. Lassen Sie die Prioritätenmatrix für sich arbeiten

    Wenn Sie sienicht schlagen können , dann nehmen Sie an ihnen teil . Integrieren Sie Faktoren wie "Interesse der Geschäftsleitung" oder "strategische Ausrichtung" in Ihre Prioritätenmatrix. Auf diese Weise sprechen Sie die Sprache der Führungskräfte und sorgen gleichzeitig für eine gewisse Ordnung in Ihrem Programm.

    Ihre Matrix könnte Folgendes enthalten:

    • Potenzielle Auswirkungen (quantitativ)
    • Ressourcenbedarf
    • Strategische Ausrichtung
    • Interesse der Geschäftsleitung
    • Risikograd

    Indem Sie diese Faktoren gewichten, schaffen Sie ein Prioritätensystem, das ein Gleichgewicht zwischen geschäftlichen Anforderungen und datengestützter Entscheidungsfindung herstellt.

    Insgesamt ist die Prioritätensetzung in der realen Welt oft mehr Kunst als Wissenschaft. Um erfolgreich zu sein, sollten Sie datengestützte Entscheidungen mit strategischer Flexibilität ausgleichen.

Das Dilemma zwischen Lieferung und Wert

Von Produktteams wird erwartet, dass sie die richtigen Ideen schnell umsetzen. Produktmanager befinden sich oft in der Zwickmühle zwischen "sofort liefern!" und "aber ist es auch wertvoll?"

Erfahren Sie, wie Sie diese kurzfristigen Erfolge mit einer langfristigen Strategie des Experimentierens in Einklang bringen können, die tatsächlich etwas bringt.

Beginnen Sie bei der Entwicklung von Funktionen mit einem Ansatz, bei dem der Wert im Vordergrund steht. Bevor Sie grünes Licht für eine neue Funktion geben, stellen Sie sicher, dass es eine klare Hypothese über ihre potenzielle Wirkung und einen Plan zu deren Messung gibt. Definieren Sie ein bestimmtes Ergebnis für Ihren Zielnutzer, skizzieren Sie messbare Erfolgskennzahlen und planen Sie Ihre Messstrategie. Denken Sie daran: Wenn Sie es nicht messen können, können Sie es auch nicht verbessern.

Beherrschen Sie als Nächstes die Kunst des minimal rentablen Experiments. Können Sie die Kernannahme hinter einer Funktion testen, ohne sie vollständig zu entwickeln? Ermitteln Sie die riskanteste Annahme, entwerfen Sie ein möglichst einfaches Experiment, um sie zu testen, und setzen Sie eine klare Erfolgsschwelle. Dazu können Landing Pages, Prototypen oder sogar eine gut platzierte Schaltfläche gehören, die nirgendwo hinführt (hallo noch einmal, Painted Door Tests!).

Im ewigen Kampf zwischen Versand und Wert ist der wahre Gewinner das Team, das herausfindet, wie man beides erreichen kann. Wenn Sie sich auf schnelle, wertorientierte Experimente konzentrieren, liefern Sie nicht einfach nur - Sie liefern intelligent, indem Sie die Notwendigkeit der Geschwindigkeit mit dem Streben nach echter Wirkung in Einklang bringen.

Den nie endenden Auftragsbestand bewältigen

Nutzen Sie die folgenden Strategien, um den Berg von Ideen in gut funktionierende Funktionen und Produkte zu verwandeln:

  1. Kuratieren des Backlogs

    Betrachten Sie Ihr Backlog als einen Garten. Regelmäßiges Beschneiden ist nicht nur gut - es ist unerlässlich. Planen Sie regelmäßige Sitzungen ein und bewerten Sie jede Idee rücksichtslos. Stimmt sie noch mit den aktuellen Zielen überein? Hat sich ihr potenzieller Einfluss verändert? Wenn sie keinen potenziellen Wert mehr hat, danken Sie ihr für ihre Dienste und lassen Sie sie fallen.

  2. Die Richtlinien "einer rein, einer raus".

    Für jede neue Experiment-Idee, die hinzukommt, muss eine andere gestrichen oder aus der Prioritätenliste gestrichen werden. Dadurch bleibt Ihr Auftragsbestand nicht nur überschaubar, sondern Sie sind auch gezwungen, Ihre Prioritäten ständig neu zu bewerten.

  3. Legen Sie klare Verfallsdaten fest

    Wenn eine Idee nach einem bestimmten Zeitraum (sagen wir 3-6 Monate) nicht ganz oben auf der Prioritätenliste steht, ist es an der Zeit, sich von ihr zu verabschieden. Das bedeutet nicht, dass die Idee schlecht ist - es bedeutet nur, dass sie es im Moment nicht wert ist, umgesetzt zu werden.

    Denken Sie daran: Wenn alles Priorität hat, hat nichts Priorität - und in der Welt des Feature Experimentierens ist die Konzentration Ihre geheime Zutat. Wenn Sie diese Strategien anwenden, können Sie sich auf hochwirksame, zeitnahe Initiativen konzentrieren.

Strategien für den Erfolg

Nun, da wir die Herausforderungen erkannt haben, wollen wir Ihnen einige praktische Strategien an die Hand geben, damit Sie in dieser neuen Landschaft nicht nur überleben, sondern auch erfolgreich sein können .

  1. Werden Sie ein Meister des Geschichtenerzählens

    Die Daten werden nicht für sich selbst sprechen, da die meisten nicht wissen, wie sie zu interpretieren sind. Seien Sie der Sprecher der Daten und verwandeln Sie diese trockenen Metriken in Geschichten über die Auswirkungen auf das Geschäft, die selbst Buchhaltungsteams aufhorchen lassen. Entwickeln Sie Erzählungen, die bei den verschiedenen Interessengruppen Anklang finden. Sie teilen nicht nur Ergebnisse mit, Sie verkaufen eine Vision.

  2. Brechen Sie diese Silos auf

    Finden Sie Verbündete in Ihrem Unternehmen, die den Wert des Experimentierens verstehen. Dies sind Ihre Geheimagenten in Ihrem Unternehmen. Treffen Sie sich regelmäßig und tauschen Sie Erfolge aus, damit Sie, wenn Sie eine kühne neue Initiative vorantreiben müssen, eine schlagfertige Truppe haben, die Sie unterstützt.

  3. Machen Sie sich agiles Experimentieren zu eigen

    Unterteilen Sie diese Mammut-Experimente in kleinere, iterative Tests. Schnelle Erfolge halten den Schwung aufrecht und sorgen für ein Lächeln bei den Beteiligten. Stellen Sie sicher, dass Ihre Tools flexibel genug sind, um mit Ihrer agilen Denkweise Schritt zu halten.

  4. Investieren Sie in den Austausch von Wissen

    Erstellen Sie ein zentrales Repository für die Ergebnisse von Experimenten, Lehren und A/B-Testing-Anwendungsfällen. Das ist so, als ob Sie Ihr eigenesWikipedia der Experimente aufbauen würden . Dies verbessert nicht nur die Effizienz, sondern zeigt auch den kumulativen Wert Ihres Programms im Laufe der Zeit.

    Optimizely Experiment Collaboration kann Ihnen dabei helfen, die Zusammenarbeit und den Wissensaustausch in Ihrem Unternehmen zu fördern, denn nicht jeder fühlt sich auf Anhieb wohl bei der Durchführung von Tests. Durch standardisierte Arbeitsabläufe und gemeinsame Pläne können Sie dafür sorgen, dass sich alle beteiligen und großartige Ideen einfangen.

    Idea intake dashboard

    Bildquelle: Optimizely
  5. Gehen Sie Experimente mit Design Thinking an

    Fühlen Sie sich in die Benutzer ein, definieren Sie Probleme klar, entwickeln Sie Ideen, erstellen Sie schnell Prototypen und testen Sie unermüdlich. Erfahren Sie mehr über Techniken der Produktideenentwicklung.

Zum Abschluss: Vorwärtskommen in schwierigen Zeiten

Lassen Sie uns die wichtigsten Strategien rekapitulieren, die wir für den Umgang mit Herausforderungen beim Experimentieren besprochen haben:

  • Budgeteffizienz: Wir haben untersucht, wie man die Wirkung maximieren kann, wenn die Ressourcen begrenzt sind.
  • Beschleunigte Tests: Erlernen Sie Techniken, um die Geschwindigkeit zu erhöhen, ohne die Qualität zu beeinträchtigen.
  • Strategisches Gleichgewicht: Diskutieren Sie, wie Sie die Unternehmensziele mit soliden Testverfahren in Einklang bringen können.
  • Feature Management: Tipps zum Ausgleich zwischen der Entwicklung neuer Funktionen und dem Nachweis des Nutzens.
  • Optimierung der Arbeitslast: Behandelt wurden Methoden zur Verwaltung umfangreicher Rückstände und hoher Arbeitsbelastungen.

Denken Sie daran, dass das aktuelle Klima zwar Herausforderungen mit sich bringt, aber auch Chancen für Innovationen bietet. Mit strategischem Denken und der richtigen Herangehensweise können Sie nicht nur diese Hindernisse überwinden, sondern auch neue Erkenntnisse gewinnen und einen Mehrwert für Ihr Unternehmen schaffen.

Unabhängig von der Strategie benötigen Sie die richtigen Tools, die Sie dabei unterstützen. Mit denFunktionen von Optimizely für das Experimentierenkönnen Sie mit allen Beteiligten zusammenarbeiten und Ideen an einem Ort validieren.

Ihr Team kann Ergebnisse ohne Code liefern und über alle Kanäle hinweg testen, so dass Sie ein präzises Targeting vornehmen können.

Klingt gut? Sehen Sie Optimizely Web Experimentation und Feature Experimentation in Aktion.