Übersetzt aus dem englischen Original. Zahlen und Quellen sind unverändert. Englisches Original lesen
Zalando
Zalando baut seinen Mode-Assistenten auf GPT-4o mini neu auf und bringt ihn in 25 Märkte
Zalando, ein europäischer Online-Modehändler, betreibt einen Dialog-Assistenten, der Kundinnen und Kunden bei der Suche nach Kleidung hilft. Nach dem Wechsel von GPT-3.5 auf GPT-4o mini meldet OpenAI 23 % mehr Klicks auf Produkte und mehr als 40 % mehr Merklisten-Einträge gegenüber der Vorgängerversion.
Kennzahlen
Wortgetreu aus den Quellen übernommen. Kopieren Sie jede Zahl mit ihrer Quellenangabe.
23 %
Anstieg der Produktklicks gegenüber der Vorgängerversion des Assistenten1
5 %
Rückgang der Empfehlungen, die Nutzer als nicht hilfreich bewerteten, nach dem Wechsel auf GPT-4o mini1
12
-mal
Wachstum des Assistenten-Traffics nach dem Wechsel von GPT-3.5 auf GPT-4o mini, erreicht ohne nennenswert höhere Ausgaben1
Was es erforderte
Das Problem
Zalando verkauft ein sehr großes Modesortiment. Kundinnen und Kunden kennen oft den Anlass, etwa eine Hochzeit oder eine Jahreszeit, aber nicht den Produktnamen. Zalando wollte, dass Menschen in eigenen Worten beschreiben, was sie brauchen, und nützliche Vorschläge erhalten. Als das Unternehmen die Idee auf viele Länder ausweitete, zeigte die erste Version Grenzen. Sie lief auf GPT-3.5, das detaillierte Anweisungen schlecht befolgte und auf Anfragen zu Anlässen und Jahreszeiten generische Antworten gab.
Was sie gebaut haben
Der Zalando-Assistent ist eine Chat-Funktion in App und Website. Kunden stellen eine Frage in Alltagssprache, erhalten eine geschriebene Antwort samt passenden Produkten und können die Anfrage weiter verfeinern. Zalando kündigte im April 2023 eine erste Beta für ausgewählte Kunden in Deutschland, Irland, im Vereinigten Königreich und in Österreich an, auf Englisch und Deutsch. Laut OpenAI startete die erste Version in vier deutsch- und englischsprachigen Märkten.
Die verbesserte Version läuft auf GPT-4o mini, einem kleineren und günstigeren OpenAI-Modell. Sie arbeitet in mehr als 20 Sprachen und ist laut OpenAI in allen 25 Märkten von Zalando verfügbar.
Wie sie vorgegangen sind
Zalando und OpenAI verbesserten zunächst, wie der Assistent getestet wird. Das Team richtete getrennte Prüfungen für einzelne Teile des Systems ein, etwa für den Schritt, der eine Anfrage weiterleitet, und den Schritt, der die Antwort verfasst. Außerdem verbesserte es die Beispiele, mit denen einem prüfenden Modell beigebracht wird, wie eine gute oder schlechte Antwort aussieht.
Danach stellte das Team den Assistenten von GPT-3.5 auf GPT-4o mini um. Innerhalb von zwei Wochen verlagerte es die Hälfte des Traffics auf das neue Modell, den Rest bald darauf. Laut OpenAI erschloss der Wechsel neue Sprachen wie Französisch und Spanisch und senkte Antwortzeit und Betriebskosten.
Ergebnisse
OpenAI meldet, dass gegenüber der Vorgängerversion die Produktklicks im Empfehlungskarussell um 23 % und die Merklisten-Einträge um mehr als 40 % stiegen. Empfehlungen, die Nutzer als nicht hilfreich bewerteten, gingen um 5 % zurück. OpenAI sagt außerdem, Zalando habe den Traffic des Assistenten durch neue Märkte auf das 12-Fache gesteigert, ohne nennenswert mehr auszugeben.
Alle diese Zahlen stammen vom Anbieter und kommen ohne absolute Werte. Zalando sagt, es plane weitere Dialogfunktionen, etwa die Beantwortung detaillierter Fragen zu Geschenken und Familienanlässen.
Alle berichteten Zahlen
| Messgröße | Wert | Quellenangabe |
|---|---|---|
| Anstieg der Produktklicks gegenüber der Vorgängerversion des Assistenten | 23 %1 | |
| Anstieg der zur Merkliste hinzugefügten Produkte gegenüber der Vorgängerversion | 40 %+1 | |
| Rückgang der Empfehlungen, die Nutzer als nicht hilfreich bewerteten, nach dem Wechsel auf GPT-4o mini | 5 %1 | |
| Wachstum des Assistenten-Traffics nach dem Wechsel von GPT-3.5 auf GPT-4o mini, erreicht ohne nennenswert höhere Ausgaben | 12-mal1 | |
| Märkte, in denen der Assistent verfügbar ist | 251 |
Erkenntnisse für Ihr Projekt
Klären Sie die Messung, bevor Sie das Modell wechseln. Zalando baute zuerst Tests für jeden Teil des Systems, etwa Routing und Antwortverfassung, um ein Upgrade anhand von Belegen beurteilen zu können.
Schalten Sie den Traffic schrittweise um. Zalando verlagerte binnen zwei Wochen die Hälfte des Assistenten-Traffics auf das neue Modell und schloss den Wechsel kurz darauf ab.
Wählen Sie das Modell passend zur Aufgabe. Zalando brauchte 20 oder mehr Sprachen und zuverlässiges Befolgen von Anweisungen und ersetzte deshalb ein Modell, das auf Anfragen zu Anlässen und Jahreszeiten generische Antworten gab.
Verfolgen Sie das Verhalten, nicht nur die Zufriedenheit. Klicks und Merklisten-Einträge zeigen, ob Empfehlungen Kundinnen und Kunden zum Handeln bewegen.
Einschränkungen
- Die Zahlen stammen aus der Kundengeschichte von OpenAI und sind daher Herstellerangaben. Die eigene Mitteilung von Zalando aus dem Jahr 2023 enthält sie nicht.
- Die Seite von OpenAI ist nicht datiert. Der Text nennt an einer Stelle einen Anstieg der Merklisten-Einträge um 40 %+ und an anderer Stelle 41 %. Wir verwenden die rundere Schlagzahl.
- Der Vergleich bezieht sich auf die Vorgängerversion des Assistenten. Die Quellen nennen weder absolute Zahlen noch Testaufbau oder Zeitraum.
- Als Einführungsdatum dient der Monat der Ankündigung der ersten Beta durch Zalando im April 2023, die für das Frühjahr für einen begrenzten Kundenkreis geplant war. Die Quellen nennen weder das genaue Startdatum der ersten Version noch das der Einführung in 25 Märkten.
- Die Kundengeschichte sagt, der Wechsel auf GPT-4o mini habe Latenz und Betriebskosten gesenkt, nennt aber keine Kostenzahl.
Quellen
- Zalando boosts the customer experience with its Assistant, powered by GPT-4o mini
OpenAI · Ohne Datum · Fallstudie des Anbieters · openai.com
- Zalando to launch a fashion assistant powered by ChatGPT
Zalando · 2023-04-19 · Pressemitteilung · corporate.zalando.com
In eigenen Worten aus den oben genannten Quellen zusammengefasst. Einen Fehler entdeckt? Siehe Korrekturen.