Challenge Panel (externe Expertenprüfung)
Eine kleine Gruppe von außerhalb des Teams einladen, die Schwachstellen des Plans zu finden, solange noch Zeit ist, sie zu beheben.
- Zeit
- 90 Min.
- Personen
- 5–10
- Art der Arbeit
- Testen · Skalieren
Kurz gesagt
Ein Challenge Panel ist eine strukturierte Sitzung, in der unabhängige externe Fachleute und, wo es passt, Nutzende eines Service einen Plan vor Start oder Skalierung prüfen und kritisieren. Dafür vier bis sechs Mitglieder mit unterschiedlichen Perspektiven wählen, sie vorab briefen, den Plan kurz vorstellen, ihre Einwände annehmen, ohne zu verteidigen, und festhalten, was sich ändert.
Worum es geht
Teams, die monatelang an einem Plan gearbeitet haben, sehen seine Lücken nur schwer. Kolleginnen und Kollegen in der Organisation teilen dieselben Annahmen, und leitende Prüfende kontrollieren oft eher, ob ein Plan vollständig ist, als ob er funktionieren wird. Ein Challenge Panel holt Menschen ohne Eigeninteresse am Plan dazu und bittet sie, nach dem zu suchen, was fehlt, riskant oder falsch ist. Typische Mitglieder sind eine Fachperson aus einer anderen Branche, eine Praktikerin, die etwas Ähnliches umgesetzt hat, jemand, den der Plan betreffen wird, und eine Person, die den Service nutzt.
Die Methode findet sich im Open Policy Making Toolkit, das Policy Lab der britischen Regierung veröffentlicht hat, als Weg, Politik- und Servicepläne vor ihrer Fertigstellung mit externer Expertise zu prüfen. Das Panel berät; es genehmigt oder verwirft nicht. Sein Wert hängt an drei Dingen: wer darin sitzt, wie gut die Mitglieder gebrieft sind und ob das Team jeden Einwand festhält und ehrlich sagt, was es ändern wird. Im Arbeitsblatt werden der geprüfte Plan, die Mitglieder und der Grund für ihre Auswahl, die zu prüfenden Fragen, die gehörten Einwände, die Antwort des Teams auf jeden, was sich ändert und wer nachfasst festgehalten.
Wann sie passt
Geeignet, wenn
- Wenn ein Plan nahezu fertig ist und kurz vor Genehmigung, Start oder breiterer Einführung steht.
- Wenn das Team lange eng an einer Lösung gearbeitet hat und vermutet, die Lücken nicht mehr zu sehen.
- Wenn der Plan Gruppen oder Partner betrifft, die nicht an seiner Gestaltung beteiligt waren.
- Wenn eine Entscheidung viel auf dem Spiel hat oder schwer umkehrbar ist, etwa die Schließung eines Kanals oder eine Änderung, wer Anspruch auf einen Service hat.
- Wenn die Leitung eine unabhängige Bestätigung möchte, dass ein Plan von Menschen außerhalb der Organisation geprüft wurde.
Ungeeignet, wenn
- Wenn der Plan noch früh ist und sich jede Woche ändert. Externe Fachleute kritisieren dann ein bewegliches Ziel; zuerst Interviews oder eine Design-Studio-Sitzung nutzen.
- Wenn die Entscheidung gefallen ist und sich nicht mehr ändern lässt. Um Einwände zu bitten, nach denen man nicht handeln wird, beschädigt das Vertrauen der Mitglieder.
- Wenn sich aus Vertraulichkeitsgründen nicht genug vom Plan mit Externen teilen lässt und ein Briefing ohne die entscheidenden Details das Panel raten ließe.
Was es braucht
- Zeit
- Etwa 90 Minuten für die Sitzung, dazu eine Woche vorab, um das Panel zu gewinnen und zu briefen, und einen Tag danach für die Auswertung.
- Personen
- 4 bis 6 Panelmitglieder, eine neutrale Moderation, 2 oder 3 Personen aus dem Team zum Vorstellen und Zuhören und eine Person fürs Protokoll: insgesamt 5 bis 10 Personen.
- Material
- Eine Briefingmappe von höchstens vier Seiten, fünf Arbeitstage vorher verschickt, drei bis fünf Fragen, die geprüft werden sollen, eine Wand oder ein gemeinsames Board für die Einwände und das Arbeitsblatt.
So läuft es ab
Schritt 1: Festlegen, was geprüft werden soll
Den Plan in einem Absatz beschreiben und dann drei bis fünf konkrete Fragen auflisten, die das Panel prüfen soll, etwa „Funktioniert das für Menschen ohne Smartphone?“ oder „Ist der Zeitplan von sechs Monaten realistisch?“. Klare Fragen bringen schärfere Einwände als eine allgemeine Bitte um Rückmeldung.
Schritt 2: Das Panel zusammenstellen
Vier bis sechs Personen wählen, die nicht an die Auftraggeberin des Plans berichten und kein Interesse an seiner Umsetzung haben. Unterschiedliche Perspektiven anstreben: eine Fachperson aus einer anderen Branche, eine Praktikerin, die etwas Ähnliches umgesetzt hat, einen betroffenen Partner und, wo passend, eine Nutzerin des Service. Notieren, warum jede Person gewählt wurde, und Interessenkonflikte prüfen.
Schritt 3: Die Mitglieder gründlich briefen
Fünf Arbeitstage vorher eine kurze Mappe schicken: das Problem, die Belege, der Plan, die Fragen und wofür der Rat des Panels genutzt wird. Vorab kurz mit jedem Mitglied sprechen, um Fragen zu beantworten. Klarstellen, dass das Panel berät und nicht entscheidet, und vereinbaren, wie Namen und Kommentare verwendet werden.
Schritt 4: Kurz vorstellen, dann zuhören
Eine neutrale Moderation von außerhalb des Teams einsetzen. Das Team stellt den Plan in höchstens 10 Minuten vor und hört dann auf zu reden. Die Moderation führt das Panel Frage für Frage durch. Teammitglieder dürfen Sachfragen beantworten, den Plan aber nicht verteidigen. Ein verteidigter Plan beendet die Prüfung.
Schritt 5: Jeden Einwand festhalten
Die protokollierende Person schreibt jeden Einwand in den Worten des Mitglieds an die Wand, einen pro Notiz. Gegen Ende fragt die Moderation jedes Mitglied nach der einen Änderung, die es vornehmen würde, wenn es nur eine machen dürfte. Das bringt meist den wichtigsten Punkt hervor.
Schritt 6: Auf jeden Einwand antworten
Innerhalb weniger Tage ordnet das Team jeden Einwand einer von drei Gruppen zu: annehmen und den Plan ändern, annehmen und untersuchen oder mit Begründung ablehnen. Die Antwort neben jeden Einwand ins Arbeitsblatt schreiben. Ablehnen ist in Ordnung, solange der Grund ehrlich ist und schriftlich festgehalten wird.
Schritt 7: Den Kreis schließen
Dem Panel innerhalb von zwei Wochen eine kurze Notiz schicken, die darlegt, was gehört wurde, was geändert wurde und warum zum Rest nicht gehandelt wurde. Für jede Änderung eine verantwortliche Person benennen. Mitglieder, die sehen, dass ihr Rat genutzt wird, helfen weit eher wieder.
Praxisbeispiel
Eine nationale Regulierungsbehörde für Telekommunikation plante, alle Mobilfunkanbieter zu einem einheitlichen Online-Verfahren für die Rufnummernmitnahme zu verpflichten und den papierbasierten Weg im Laden innerhalb von sechs Monaten zu schließen. Monatlich wurden rund 160.000 Rufnummern mitgenommen, und etwa 30 % der Vorgänge begannen noch auf Papier im Laden.
Das Team legte vier Fragen für das Panel fest, darunter „Wer wird Schwierigkeiten haben, wenn der Papierweg schließt?“ und „Können die Anbieter innerhalb von sechs Monaten liefern?“.
Fünf Mitglieder wurden eingeladen: eine Spezialistin für digitale Identität aus dem Bankensektor, ein ehemaliger Betriebsleiter eines Mobilfunkanbieters, eine Vertreterin eines Behindertenverbands, ein Verbraucherschutzreferent einer anderen Regulierungsbehörde und eine pensionierte Lehrerin, die im Vorjahr ihre Rufnummer im Laden mitgenommen hatte.
Die 90-minütige Sitzung moderierte ein Wissenschaftler für Public Policy. Das Team stellte in acht Minuten vor. Das Panel brachte 23 Einwände vor.
Der ehemalige Betriebsleiter sagte, der Zeitplan von sechs Monaten übersehe die jährlichen Release-Zyklen der Anbietersysteme. Die Vertreterin des Behindertenverbands wies darauf hin, dass die Online-Identitätsprüfung einen Video-Selfie-Schritt enthielt, den manche blinde Nutzende nicht allein bewältigen konnten. Die pensionierte Lehrerin sagte, sie sei in den Laden gegangen, weil sie von jemandem bestätigt haben wollte, dass ihre alte Leitung nicht abgeschaltet wird, bevor die neue funktioniert.
Das Team nahm 9 Einwände an, vereinbarte, 6 zu untersuchen, und lehnte 8 mit Begründung ab. Es verschob den Schließungstermin von sechs auf neun Monate, behielt einen begleiteten Weg im Laden für alle, die danach fragen, ergänzte eine barrierefreie Alternative zum Videoschritt und fügte eine SMS hinzu, die den genauen Zeitpunkt der Umschaltung der alten Leitung bestätigt.
Jedes Mitglied erhielt drei Wochen später eine zweiseitige Notiz mit allen Einwänden und den Antworten. Der Plan ging mit dieser Notiz im Anhang an das Leitungsgremium der Behörde.
Zur VeranschaulichungTipps und typische Fehler
Tipps
- Mindestens ein Mitglied aufnehmen, das mit dem Ergebnis leben wird, nicht nur Fachleute, die es kommentieren.
- Eine Moderation von außerhalb des Teams einsetzen. Moderiert ein Teammitglied, gleitet es ins Verteidigen des Plans ab.
- Das Briefing kurz halten. Eine vierseitige Mappe, die gelesen wird, ist besser als vierzig Seiten, die überflogen werden.
- Den Mitgliedern angemessen danken und, wo die eigenen Regeln es erlauben, Nutzende für ihre Zeit vergüten.
Typische Fehler
- Wohlwollende Fachleute einladen, die den Plan absegnen, wodurch das Panel zur Formsache wird.
- Das Panel zu spät abhalten, wenn sich nichts mehr ändern lässt, sodass die Einwände protokolliert und ignoriert werden.
- Das Team jeden Einwand im Raum beantworten lassen, woraufhin die Mitglieder aufhören, welche vorzubringen.
- Dem Panel nie mitteilen, was geschehen ist, was es beim nächsten Mal schwerer macht, jemanden zu gewinnen.
Was am Ende vorliegt
Am Ende steht eine schriftliche Liste aller vorgebrachten Einwände, die Antwort des Teams auf jeden (ändern, untersuchen oder mit Begründung ablehnen), die Änderungen am Plan mit Verantwortlichen und eine an das Panel zurückgeschickte Notiz. Als Nächstes werden meist Value Case und Roadmap um die Änderungen ergänzt und alle als „untersuchen“ markierten Einwände vor dem Start getestet.
Häufige Fragen
Wer sollte in einem Challenge Panel sitzen?
Vier bis sechs Personen ohne Interesse an der Umsetzung des Plans und mit unterschiedlichen Perspektiven: eine Fachperson aus einem anderen Bereich, jemand, der ähnliche Arbeit umgesetzt hat, ein betroffener Partner oder eine betroffene Gruppe und, wo passend, eine Person, die den Service nutzt.
Genehmigt ein Challenge Panel den Plan?
Nein. Das Panel berät; die üblichen Entscheidungsträger entscheiden weiterhin. Wer das im Briefing klarstellt, lässt die Mitglieder offen sprechen und vermeidet Unklarheit über die Verantwortung.
Was ist der Unterschied zwischen Challenge Panel und Pre-Mortem?
Ein Pre-Mortem führt das Team selbst durch, indem es sich vorstellt, der Plan sei gescheitert, und herausarbeitet, warum. Ein Challenge Panel holt Externe dazu, die die Annahmen des Teams nicht teilen. Viele Teams führen zuerst ein Pre-Mortem durch und bringen den gestärkten Plan dann vor ein Panel.
Werkzeugkarte
Das Arbeitsblatt, das das Team ausfüllt, ein Kästchen pro Feld.
- Geprüfter Plan
- Panelmitglieder und Auswahlgrund
- Zu prüfende Fragen
- Gehörte Einwände
- Antwort des Teams
- Was sich ändert
- Verantwortung und Nachverfolgung