So vergleichen Sie Kundensupport-Kennzahlen über Zeit, ohne sich von Prozentwerten täuschen zu lassen
Eine praktische Methode zum Vergleich von Messaging-Support-Ergebnissen: Definieren Sie jede Kennzahl, gleichen Sie die Zeiträume ab, zeigen Sie Fallzahlen und Quoten und prüfen Sie Fallmix und Stichprobengröße, bevor Sie handeln.
Warum eine prozentuale Veränderung ein falsches Bild vermitteln kann
Eine Quote kann sich verbessern, obwohl sich die Zahl der zugrunde liegenden Fälle stark verändert. Ein Prozentwert kann sich auch verschieben, weil sich der Nenner geändert hat, die Berichtszeiträume unterschiedlich sind oder sich der Mix der Unterhaltungen verändert hat – und nicht, weil die Bearbeitung durch den Support besser oder schlechter geworden ist.
Für WebChat- und WhatsApp-Teams ist ein wöchentlicher oder monatlicher Vergleich nur dann hilfreich, wenn klar ist, was gezählt wurde, welche Unterhaltungen berücksichtigt werden konnten und was sich rund um die Messung verändert hat. Betrachten Sie eine Kennzahl als Anlass für weitere Untersuchungen und nicht als automatische Aufforderung, Personalbesetzung oder Arbeitsabläufe zu ändern.
- Fragen Sie, welche Entscheidung die Kennzahl unterstützen soll.
- Prüfen Sie Zähler, Nenner, Zeitraum und abgedeckte Kanäle.
- Betrachten Sie Fallzahlen und Fallmix, bevor Sie eine Quote als Leistungsänderung interpretieren.
Definieren Sie zuerst Kennzahl, Einheit und Nenner
Beschreiben Sie die Kennzahl in betrieblichen Begriffen, bevor Sie Zeiträume vergleichen. Eine Abschlussquote könnte beispielsweise abgeschlossene Unterhaltungen geteilt durch alle im Zeitraum begonnenen, berücksichtigungsfähigen Unterhaltungen sein. Legen Sie fest, ob teilweise abgeschlossene, fehlgeschlagene, weitergeleitete, erneut geöffnete oder noch offene Unterhaltungen einbezogen werden, und wenden Sie dieselbe Regel auf beide Zeiträume an.
Definieren Sie außerdem die Einheit: Unterhaltungen, Kundenanfragen, erste Antworten oder ein anderes Ereignis. Diese Einheiten sind nicht austauschbar. Soll eine Quote Ereignisse im Verhältnis zu einer berücksichtigungsfähigen Grundgesamtheit über einen bestimmten Zeitraum abbilden, benennen Sie diese Grundgesamtheit und das Zeitfenster ausdrücklich.
Gehen Sie nicht davon aus, dass eine Berichtsbezeichnung eine Kennzahl vollständig definiert. Prüfen Sie ihre Berechnung und Filter im Bericht oder Export und halten Sie Ausschlüsse fest. webchat.vip bietet Betriebsanalysen, Unterhaltungsprotokolle und exportierbare Berichte; Teams sollten die genaue Definition der Kennzahl prüfen, die sie für einen Vergleich verwenden.
- Name der Kennzahl und geschäftliche Fragestellung
- Zähler: Was gilt als Ereignis oder Ergebnis?
- Nenner: Wer oder was hätte zu diesem Ergebnis beitragen können?
- Analyseeinheit und Umgang mit Duplikaten, Weiterleitungen und offenen Fällen
- Filter, Ausschlüsse und Datenquelle
Wählen Sie vergleichbare Zeiträume
Vergleichen Sie Gleiches mit Gleichem: eine vollständige Woche mit einer vollständigen Woche oder einen vollständigen Monat mit einem vollständigen Monat. Halten Sie Start- und Enddatum, Zeitzone und die Frage fest, ob der Bericht den gesamten letzten Tag umfasst. Ein noch nicht abgeschlossener aktueller Zeitraum sollte nicht so verglichen werden, als wäre er vollständig.
Prüfen Sie die besetzten Betriebsstunden und die Kanalabdeckung. Wenn ein Zeitraum mehr Betriebsstunden umfasst oder ein WebChat- oder WhatsApp-Kanal während eines Teils des Zeitraums nicht in die Messung einbezogen wurde, machen Sie diese Einschränkung sichtbar. Eine Quote kann zwar einen Nenner aus berücksichtigungsfähigen Fällen verwenden, doch die Möglichkeit, Fälle zu erhalten, kann sich trotzdem unterscheiden.
Wenn die Nachfrage saisonalen Schwankungen unterliegt, vergleichen Sie – sofern geeignet – mit der entsprechenden Saison eines Vorjahres. Ein benachbarter Zeitraum ist möglicherweise keine faire Vergleichsbasis, wenn wiederkehrende saisonale Veränderungen das Volumen oder die Art der Anfragen beeinflussen.
- Gleichen Sie Länge und Vollständigkeit der Zeiträume ab.
- Halten Sie besetzte Betriebsstunden, Feiertage und Dienstplanänderungen fest.
- Prüfen Sie, welche Kanäle und Abteilungen während des gesamten Zeitraums einbezogen waren.
- Ziehen Sie bei saisonalen Kennzahlen die entsprechende Saison eines Vorjahres in Betracht.
Zeigen Sie Fallzahlen zusammen mit Quoten
Fallzahlen und Quoten beantworten unterschiedliche Fragen. Fallzahlen zeigen, wie viele Ereignisse aufgetreten sind; Quoten beziehen Ergebnisse auf eine definierte Grundgesamtheit. Eine Quote allein passt sich nicht automatisch an unterschiedlich lange Zeiträume an: Vergleichen Sie für eine Abschlussquote deshalb möglichst gleich lange Zeiträume und legen Sie Zähler, Nenner und Beobachtungsfenster fest. Eine zeitbezogene Rate setzt Ereignisse zur gefährdeten Grundgesamtheit in einem ausdrücklich angegebenen Zeitraum ins Verhältnis. Fallzahlen allein eignen sich für Vergleiche nur, wenn die verglichenen Grundgesamtheiten gleich oder ungefähr gleich groß sind.
Zeigen Sie bei jeder zentralen Quote ihren Zähler und Nenner. Geben Sie zum Beispiel „innerhalb des festgelegten Zeitraums gelöst: 80 von 100 berücksichtigungsfähigen Unterhaltungen, 80 %“ an und nicht nur „80 %“. Die Zahlen hier dienen der Veranschaulichung; Teams müssen ihre eigene definierte Kennzahl und ihre eigenen Daten verwenden.
Prüfen Sie für betriebliche Entscheidungen neben der Ergebnisquote auch die Fallzahlen zum Arbeitsaufkommen. Eine Veränderung der Quote allein belegt nicht, dass die Personalbesetzung angepasst werden sollte.
- Zeigen Sie Zähler, Nenner und Quote gemeinsam.
- Führen Sie alle berücksichtigungsfähigen Unterhaltungen und relevante Fallzahlen zum Arbeitsaufkommen auf.
- Wenden Sie in allen Zeiträumen dieselben Zählregeln an.
- Erläutern Sie, wann eine veränderte Fallzahl einen Vergleich der absoluten Zahlen allein ungeeignet macht.
Unterscheiden Sie Prozentpunkte von relativen prozentualen Veränderungen
Eine Veränderung in Prozentpunkten ist die arithmetische Differenz zwischen zwei Prozentwerten. Eine relative prozentuale Veränderung beschreibt, wie groß die Veränderung im Verhältnis zum Ausgangswert ist. Es handelt sich um unterschiedliche Berechnungen, die klar bezeichnet werden sollten.
Sinkt eine Quote von 10 % auf 9 %, ist sie um 1 Prozentpunkt gesunken. Im Verhältnis zum Ausgangswert von 10 % ist sie um 10 % gesunken. Die alleinige Aussage „um 1 % gesunken“ ist mehrdeutig: Sie könnte einen Rückgang um einen Prozentpunkt oder einen relativen Rückgang um ein Prozent bedeuten.
Nennen Sie bei den meisten Quotenvergleichen beide Werte und verwenden Sie die Bezeichnung, die zur Berechnung passt. Geben Sie keine relative Veränderung ohne den Ausgangswert an, insbesondere wenn die Ausgangsquote niedrig ist.
- Veränderung in Prozentpunkten = spätere Quote minus frühere Quote.
- Relative Veränderung = (spätere Quote minus frühere Quote) geteilt durch die frühere Quote.
- Kennzeichnen Sie das Ergebnis und nennen Sie Ausgangs- und Endquote.
Prüfen Sie den Mix aus Kanälen, Anfragen und Prioritäten
Eine Gesamtquote kann sich verändern, wenn sich die Zusammensetzung der Fälle ändert. Beispielsweise kann sich der Anteil der Unterhaltungen je Kanal oder das Verhältnis von Anfragearten und Prioritäten zwischen den Zeiträumen unterscheiden. Der Gesamtwert fasst dann Gruppen mit unterschiedlichen Anteilen zusammen.
Schlüsseln Sie das Ergebnis nach aussagekräftigen Kategorien auf – etwa WebChat und WhatsApp, Abteilung, Anfrageart oder Priorität –, sofern diese Felder zuverlässig erfasst werden und der Vergleich relevant ist. Vergleichen Sie jede Kategorie anhand einheitlicher Definitionen. Wenn sich die Gesamtquote verändert hat, die Quoten auf Kategorieebene aber nicht auf dieselbe Weise, untersuchen Sie, ob der veränderte Mix einen Teil der Verschiebung erklärt.
Verwenden Sie Tags und Unterhaltungsdatensätze nur, wenn ihre Definitionen einheitlich angewendet werden. Eine veränderte Tagging-Praxis kann einen Kategorienvergleich unzuverlässig machen. Ziehen Sie keine Schlussfolgerungen aus Kategorien mit sehr wenigen Beobachtungen.
- Vergleichen Sie die Kanalabdeckung und die Anteile der Unterhaltungen.
- Prüfen Sie gegebenenfalls den Mix aus Anfrageart, Priorität und Abteilung.
- Vergewissern Sie sich, dass Tags und Kategorien einheitlich verwendet wurden.
- Zeigen Sie das Gesamtergebnis neben den Vergleichen auf Kategorieebene.
Gehen Sie vorsichtig mit kleinen Stichproben und unvollständigen Zeiträumen um
Ein kleiner Nenner macht eine Quote empfindlich gegenüber einzelnen Fällen. Ein zusätzliches Ergebnis kann den Prozentwert deutlich verschieben, sodass eine kurzfristige Veränderung möglicherweise zu ungenau ist, um eine weitreichende betriebliche Schlussfolgerung zu stützen.
Zeigen Sie die zugrunde liegenden Fallzahlen und weisen Sie auf kleine Nenner hin. Wenn Ihr Team Konfidenzintervalle oder andere statistische Methoden verwendet, interpretieren Sie diese im Kontext: Ein statistisch nicht signifikantes Ergebnis beweist nicht, dass kein bedeutsamer Unterschied besteht. Umgekehrt ist eine sichtbare Verschiebung einer Quote in einer kleinen Stichprobe für sich genommen kein Beleg für eine dauerhafte Veränderung.
Warten Sie nach Möglichkeit auf einen vollständigen Zeitraum oder sammeln Sie weitere Beobachtungen. Wenn eine sofortige Entscheidung nötig ist, benennen Sie die Unsicherheit und beziehen Sie Fallprüfungen und den betrieblichen Kontext ein, statt die Quote als abschließend zu behandeln.
Prüfen Sie Unterhaltungen nur, wenn es für die Fragestellung nötig ist. Beschränken Sie den Zugriff auf berechtigte Personen, sehen Sie nur die erforderlichen Inhalte ein und vermeiden Sie es, sensible Angaben unnötig zu kopieren.
- Weisen Sie auf kleine Nenner und unvollständige Berichtszeiträume hin.
- Betrachten Sie eine einzelne kurzfristige Veränderung nicht als stabilen Trend.
- Benennen Sie die Unsicherheiten und geben Sie an, welche zusätzlichen Daten hilfreich wären.
- Prüfen Sie repräsentative Unterhaltungen, wenn sich die Veränderung nicht allein durch eine Quote erklären lässt.
Verwenden Sie vor einer Entscheidung ein Vergleichsarbeitsblatt
Dokumentieren Sie den Vergleich an einem zentralen Ort, damit eine andere Führungskraft oder eine Analystin beziehungsweise ein Analyst ihn nachvollziehen kann. Die Analysen, Unterhaltungsprotokolle und exportierbaren Berichte von webchat.vip können die betriebliche Prüfung unterstützen; das Team muss weiterhin die in seiner Analyse verwendeten Definitionen, Filter und Einschränkungen angeben.
Wenn die Zahlen auf eine Änderung der Personalbesetzung oder des Arbeitsablaufs hindeuten, sollte eine Person die Daten prüfen und zuerst relevante Unterhaltungen untersuchen. Leiten Sie ungeklärte Fragen zu Definitionen oder Datenqualität an die für den Bericht zuständige Person oder eine Betriebsanalystin beziehungsweise einen Betriebsanalysten weiter; bitten Sie die Teamleitung, den Kontext von Dienstplan und Arbeitsabläufen zu bewerten. Betrifft das Ergebnis Beschwerden oder die Bearbeitung von Supportfällen, sollten Sie die Fälle mit der zuständigen Supportleitung prüfen, bevor Sie über Korrekturmaßnahmen entscheiden.
- Kennzahl und beabsichtigte Entscheidung:
- Zähler / Nenner / Einheit:
- Verglichene Zeiträume, Vollständigkeit und Zeitzone:
- Besetzte Betriebsstunden und Abdeckung von WebChat/WhatsApp:
- Fallzahlen und Quoten für jeden Zeitraum:
- Veränderung in Prozentpunkten und gegebenenfalls relative Veränderung:
- Mix aus Kanal, Anfrageart, Priorität oder Abteilung:
- Einschränkungen durch kleine Stichproben, unvollständige Daten oder Tags:
Häufig gestellte Fragen
Sollte ich Prozentwerte oder Fallzahlen vergleichen?
Verwenden Sie nach Möglichkeit beides. Fallzahlen zeigen die Menge der Ereignisse, während Quoten Ergebnisse auf eine definierte berücksichtigungsfähige Grundgesamtheit beziehen. Zeigen Sie jede Quote mit Zähler und Nenner und behalten Sie mithilfe der Fallzahlen Veränderungen des Arbeitsaufkommens im Blick.
Was ist der Unterschied zwischen einem Prozentpunkt und einer prozentualen Veränderung?
Prozentpunkte sind die arithmetische Differenz zwischen zwei Prozentwerten. Bei der relativen prozentualen Veränderung wird diese Differenz mit dem Ausgangswert verglichen. Ein Rückgang von 10 % auf 9 % entspricht einem Prozentpunkt und relativ zum Ausgangswert einem Rückgang um 10 %.
Wie sollte ich Ergebnisse von WebChat und WhatsApp vergleichen?
Prüfen Sie zunächst, ob dieselbe Kennzahlendefinition, dieselben Regeln für Zeiträume und dieselben Einschlusskriterien gelten. Zeigen Sie anschließend die Fallzahlen und Quoten je Kanal, prüfen Sie Kanalabdeckung und besetzte Betriebsstunden und untersuchen Sie, ob sich der Mix aus Anfragearten oder Prioritäten verändert hat.
Wann sollte ein Support-Team nicht allein aufgrund einer veränderten Quote handeln?
Gehen Sie vorsichtig vor, wenn ein Zeitraum unvollständig ist, der Nenner klein ist, sich Definitionen oder Tags geändert haben, die Kanalabdeckung abweicht oder sich der Fallmix verschoben hat. Bitten Sie eine Analystin, einen Analysten oder die für den Bericht zuständige Person, den Vergleich zu prüfen. Anschließend sollte die zuständige Supportleitung den betrieblichen Kontext und relevante Unterhaltungen bewerten, bevor Personalbesetzung oder Arbeitsabläufe geändert werden.
Quellen und weiterführende Literatur
Primäre und maßgebliche Referenzen zur Prüfung der faktischen Grundlage dieses Leitfadens.
- Measuring completion rate — GOV.UK Service Manual
- Rate — CDC/National Center for Health Statistics
- Describing Epidemiologic Data — CDC Field Epidemiology Manual
- Using seasonally adjusted and unadjusted data — U.S. Bureau of Labor Statistics
- Percentages and percentage points — Office for National Statistics
- Age adjustment — CDC/National Center for Health Statistics
- Stratified Tables — CDC Epi Info User Guide
- Statistical significance — CDC/National Center for Health Statistics
- Appendix A: Statistical Considerations — CDC
- ISO 10002:2018 — Quality management — Customer satisfaction — Guidelines for complaints handling in organizations — International Organization for Standardization