Holiday Extras zufolge half Codex dem Team, innerhalb von zwei Wochen eine funktionsfähige neue App-Version zu erstellen. Ein vergleichbarer Entwicklungsfortschritt hätte zuvor voraussichtlich mehr als sechs Monate beansprucht. Die Kundenstudie vom 12. November berichtet auch von besseren Buchungsergebnissen und weniger Fehlern nach dem Neubau.

Entscheidend ist, wie sich die Arbeit veränderte. Fachleute aus dem Unternehmen brachten Kunden- und Betriebswissen ein. Entwickler schufen wiederverwendbare Grundlagen und behielten die Verantwortung für Architektur und Sicherheit.

Die Ergebnisse stammen aus einer von OpenAI veröffentlichten Kundengeschichte. Sie beschreiben die Erfahrung eines Unternehmens anhand von Vorher-nachher-Vergleichen aus unterschiedlichen Zeiträumen, keinen kontrollierten unabhängigen Codex-Test.

Von jährlichen großen Releases zu wöchentlichen Verbesserungen

Holiday Extras unterstützt Kunden beim Suchen, Buchen und Verwalten von Reisen. Größere Änderungen der Haupt-App waren zuvor auf ein jährliches Release ausgerichtet. Der Neubau veränderte sowohl das Kundenerlebnis als auch den Veröffentlichungsrhythmus.

Liam Thompson, Vice President für KI-Innovation und früherer Designchef, arbeitete mit Entwicklern daran, Kundenwissen in Software umzusetzen. Kleine, dokumentierte Pakete lieferten wiederverwendbare Grundlagen. Die Entwickler konzentrierten sich auf Architektur, APIs, Sicherheit und Entwicklungsabläufe.

Der Studie zufolge entstand innerhalb von zwei Wochen eine vollständig funktionsfähige Neufassung. Daraus darf nicht die Behauptung werden, sämtliche Produktionsanforderungen, Prüfungen oder Migrationen seien in zwei Wochen abgeschlossen worden. Der Vergleich betrifft Entwicklungsfortschritte, die zuvor mehr als sechs Monate benötigt hätten.

Die neue Anwendung nutzte Buchungen, Reisen und die Historie der Kunden zur Personalisierung. Laut Bericht ermöglichte Codex die parallele Entwicklung von iOS- und Android-Funktionen, statt Verbesserungen erst später auf Android bereitzustellen.

Im ersten Monat nach dem Neubau wechselte die Haupt-App zu wöchentlichen Releases mit mehreren neuen Funktionen. Die separate Countdown-App ging von ungefähr einer neuen Funktion alle sechs Monate zu mehreren Erweiterungen pro Woche über. Das sind unterschiedliche Produkte und Messgrößen, keine austauschbaren Release-Statistiken.

Was die Zahlen zu Konversion und Fehlern tatsächlich messen

Das Unternehmen meldet nach dem Neubau der Haupt-App eine um 32,5% höhere Konversion vom Öffnen der App zur Buchung. Die zugrunde liegenden Konversionsraten und Stichprobengrößen nennt die Studie nicht. Die Zahl darf nicht als Anstieg um 32,5 Prozentpunkte wiedergegeben werden.

Außerdem sei die Fehlerquote der Haupt-App von 19% auf 9% gefallen. Das entspricht einem Rückgang um 10 Prozentpunkte. Die Bezeichnung als bloßer Rückgang um 10% würde den Unterschied zwischen relativer Prozentänderung und Prozentpunkten verwischen.

Die Quelle erklärt ausdrücklich, dass alte und neu aufgebaute Haupt-App über unterschiedliche Zeiträume verglichen wurden. Die Ergebnisse isolieren daher den Beitrag von Codex nicht gegenüber Personalisierung, anderen App-Änderungen oder Unterschieden zwischen diesen Zeiträumen. Der Fall belegt zugeschriebene betriebliche Ergebnisse, keine Garantie derselben Wirkung an anderer Stelle.

Für Teams mit ähnlichen Plänen ist diese Unterscheidung wichtig. Schnellere Entwicklung und bessere Geschäftsergebnisse können zusammen auftreten, ohne dass die verfügbaren Belege zeigen, welche Änderung welches Ergebnis verursacht hat.

Kundenfeedback wird zu Entwicklungsarbeit

Das Countdown-Beispiel zeigt die beschriebene Freigabegrenze. Nachdem sich ein Kunde über eine fehlende Listenansicht beschwert hatte, bereitete ein Agent eine Korrektur vor. Thompson genehmigte sie vor der Einreichung. Laut Studie änderte der Kunde anschließend seine Bewertung von einem auf fünf Sterne.

Das ist ein konkretes Beispiel für eine kürzere Rückkopplungsschleife. Es belegt nicht, dass jede von Agenten geschriebene Änderung die menschliche Prüfung umgehen kann. Die berichtete Reihenfolge umfasst Vorbereitung, Genehmigung und Einreichung.

Der Ansatz erstreckte sich auch auf den Betrieb. David Lee, Director of Innovation and Growth, beschrieb ein System, das Kundenchats zu Flughafentransfers in bearbeitbare Tickets umwandelt. Dadurch kann das Team Probleme im Lieferantennetz erkennen. Die Quelle nennt keine gemessene Verbesserung der Ticketlösung. Das Beispiel belegt daher einen Arbeitsablauf, keinen quantifizierten Servicegewinn.

Fachwissen braucht weiterhin technische Grundlagen

Vor der Codex-Einführung hatte das Unternehmen bereits unternehmensweiten Zugang zu ChatGPT Enterprise. Auch CEO Matthew Pack nutzte Codex selbst. Er betrachtete eigene Erfahrungen als Weg, die Bedürfnisse der Kollegen zu verstehen und neu zu überlegen, was das Unternehmen entwickeln könnte.

Die Studie beschreibt Experimentierfreiheit mit Leitplanken. Entwickler erstellten Pakete, Sicherheitskontrollen und Abläufe, die Beiträge außerhalb klassischer Entwicklungsrollen ermöglichten. Ein erfahrener Buchhalter baute beispielsweise Finanzsysteme mithilfe seines Fachwissens und des Feedbacks von Kollegen neu auf.

Diese Arbeitsteilung ist der Kern der Geschichte. Der berichtete Nutzen bestand nicht allein darin, schneller Code zu erzeugen. Menschen mit Verständnis für Kunden- und Betriebsprobleme konnten Änderungen mit umsetzen, während Entwickler die technischen Grundlagen bereitstellten.

Holiday Extras nutzte OpenAI-Modelle außerdem für das personalisierte App-Erlebnis. Die Studie beschreibt Koordination und Erkenntnisse durch dots, darunter einen proaktiv erstellten Leistungsbericht nach dem Start. Das sind separate Anwendungen innerhalb der umfassenderen Zusammenarbeit. Sie dürfen nicht sämtlich Codex allein zugeschrieben werden.

Als Nächstes soll KI mehr Verwaltung übernehmen

Pack möchte weitere Unternehmenssysteme über KI verwalten lassen, wobei Mitarbeiter die Arbeit steuern und die Ergebnisse gestalten. Das ist ein in der Studie beschriebenes Ziel, keine bereits abgeschlossene unternehmensweite Umstellung.

Für andere Teams ist die Verbindung aus Fachwissen, wiederverwendbaren technischen Grundlagen und menschlicher Freigabe am ehesten übertragbar. Der berichtete Neubau in zwei Wochen und die Buchungszuwächse machen den Fall untersuchenswert. Unterschiedliche Vergleichszeiträume und fehlende Messdetails begrenzen jedoch, wie gut sich damit Ergebnisse anderer Organisationen vorhersagen lassen.

Quellen

Tool-Verzeichnis ansehen →