Washington Post uruchamia podcasty AI, mimo że testy wykazały, iż większość scenariuszy zawodzi

Problem

Wydawcy wiadomości chcą oferować spersonalizowane produkty. The Washington Post chciał narzędzia, które zamieni jego dziennikarstwo w podcast szyty na miarę dla każdego czytelnika. Wartość marki informacyjnej opiera się na zaufaniu, więc dokładność liczy się bardziej niż szybkość wejścia na rynek.

Co zbudowano

"Your Personal Podcast" to narzędzie AI, które generuje spersonalizowane skróty audio na podstawie dziennikarstwa Post. Szefowie technologii i produktów Post ogłosili je pracownikom w ramach nacisku na doświadczenia premium, wybór klienta i produkty AI. Post określa je jako wersję beta.

Jak to zrobiono

Przed premierą Post przeprowadził wewnętrzne testy, w których testerzy oceniali każdy wygenerowany scenariusz jako zaliczony lub niezaliczony względem standardów publikacji redakcji. Testerzy mieli oblewać scenariusz w razie wątpliwości. Zespół oceniający Post mimo to zalecił ruszyć dalej i nadal naprawiać pozostałe problemy wspólnie z redakcją, oznaczając narzędzie jako rozwiązanie w trakcie rozwoju.

Co poszło nie tak

Semafor podał, że w trzech rundach testów od 68 % do 84 % scenariuszy zawiodło. Wewnętrzna ocena uznała, że dalsze drobne zmiany promptów raczej nie pomogą bez dodatkowego ryzyka. Pracownicy opisywali błędy od pomyłek w wymowie po wymyślone lub błędnie przypisane cytaty i mówili, że narzędzie czasem dodawało komentarze, na przykład traktując cytaty źródła jako stanowisko gazety. Niektórzy redaktorzy stanowczo się sprzeciwili. Rzecznik Post powiedział, że produkt był wyraźnie oznaczony jako beta.

Wyniki

Produkt wystartował jako beta mimo wyników testów. Ten przypadek dokumentuje decyzję o premierze, a nie wyniki biznesowe. Źródło nie podaje danych o użyciu, subskrybentach ani kosztach.