Traducido del original en inglés. Las cifras y las fuentes no cambian. Leer el original en inglés
City of Yokosuka
La ciudad de Yokosuka prueba ChatGPT con unos 3.800 empleados y después pasa a su adopción completa
En abril de 2023, la ciudad japonesa de Yokosuka dio acceso a ChatGPT a todos los empleados que usan su herramienta de chat interna, unas 3.800 personas. Tras 41 días, 1.913 de 3.828 empleados, cerca de la mitad, lo habían usado, y el 76,0 % de los encuestados en la encuesta final quería seguir usándolo. La ciudad también detectó quejas sobre la precisión y anunció que pasaría a la adopción completa.
Cifras clave
Copiadas literalmente de las fuentes. Copie cualquier cifra con su cita.
1.913
Empleados con una sala de chat de ChatGPT a 31 de mayo de 2023, de un total de 3.828 empleados, en los primeros 41 días de la prueba1
25.897
Mensajes enviados al bot de ChatGPT en los primeros 41 días de la prueba1
76,0 %
Encuestados de la encuesta final (n=433) que dijeron querer seguir usando ChatGPT1
al menos unos 10 minutos
Estimación de la ciudad del tiempo de trabajo ahorrado al día, según Government Transformation2
Qué requirió
El problema
Yokosuka, una ciudad de Japón, quería saber si un chatbot de IA de uso general podía reducir el tiempo dedicado a redactar, resumir y revisar documentos, sin exponer datos personales.
Qué construyeron
Desde el 20 de abril de 2023, la ciudad puso ChatGPT a disposición de todos los empleados que pueden usar su herramienta de chat interna, LoGo Chat, unas 3.800 personas. Los empleados hablaban con un bot de ChatGPT dentro de la herramienta que ya usaban. No debían introducirse datos personales.
Cómo lo hicieron
La prueba se llevó a cabo como un experimento con dos encuestas a los empleados. La primera se realizó del 27 de abril al 2 de mayo y la segunda del 23 al 29 de mayo. Entre ambas, la ciudad envió dos números de un boletín para los empleados con consejos para usar bien ChatGPT. Las preguntas eran las mismas en ambas encuestas, de modo que la ciudad pudo comparar los resultados. La ciudad también entrevistó a usuarios sobre cómo ahorraban tiempo. El bot usaba ChatGPT-3.5-turbo.
Resultados
A 31 de mayo, 1.913 de 3.828 empleados, el 50 %, tenían una sala de chat con el bot y habían enviado 25.897 mensajes. En la encuesta final, la ciudad indica que más del 80 % dijo que ChatGPT aumentaría su eficiencia en el trabajo y que el 76,0 % quería seguir usándolo. Por separado, la ciudad calculó una estimación aproximada de unas 22.700 horas de trabajo al año solo en la redacción de documentos, suponiendo 10 minutos ahorrados al día para el 29,3 % de los usuarios que redactan documentos. Government Transformation recogió la estimación de la ciudad como al menos unos 10 minutos ahorrados al día.
Qué salió mal
No todos los empleados estaban contentos. Muchos usaban ChatGPT para búsquedas al estilo de la web, algo para lo que, según la ciudad, es poco adecuado, y la ciudad indica que casi la mitad de los encuestados estaba insatisfecha con la precisión de las respuestas. La ciudad respondió con formación y un plan para pasar a GPT-4.
Todas las cifras comunicadas
| Indicador | Cifra | Cita |
|---|---|---|
| Empleados con una sala de chat de ChatGPT a 31 de mayo de 2023, de un total de 3.828 empleados, en los primeros 41 días de la prueba | 1.9131 | |
| Mensajes enviados al bot de ChatGPT en los primeros 41 días de la prueba | 25.8971 | |
| Encuestados de la encuesta final (n=433) que dijeron querer seguir usando ChatGPT | 76,0 %1 | |
| Estimación de la ciudad del tiempo de trabajo ahorrado al día, según Government Transformation | al menos unos 10 minutos2 | |
| Estimación aproximada de la ciudad (un cálculo basado en supuestos, no un ahorro medido) de las horas de trabajo ahorradas al año en la redacción de documentos, a partir de 1.913 usuarios, el 29,3 % de los cuales lo usa para redactar, 10 minutos ahorrados al día y 243 días laborables | 22.700 horas1 |
Lecciones para su proyecto
Haga una prueba corta y medida antes de comprometerse. Yokosuka realizó dos encuestas a los empleados con seis semanas de diferencia y usó la primera para corregir problemas en la segunda.
Enseñe a las personas a preguntar. La primera encuesta mostró que muchos empleados usaban ChatGPT para búsquedas al estilo de la web, un uso poco adecuado. Un boletín interno con consejos redujo esa proporción.
Ponga la herramienta donde los empleados ya trabajan. Yokosuka conectó ChatGPT a la herramienta de chat que todos los empleados ya usaban.
Fije reglas sobre los datos desde el primer día. La ciudad no permitió introducir datos personales.
Prevea las quejas sobre la precisión. La insatisfacción de los empleados con las respuestas siguió siendo alta, así que la ciudad planeó un modelo más potente (GPT-4) y formación.
Salvedades
- Las cifras proceden de la propia ciudad. Las 22.700 horas son una estimación aproximada construida con los supuestos de la ciudad, no un ahorro medido; multiplica el número de usuarios por unos 10 minutos diarios supuestos.
- Las tasas de respuesta de las encuestas fueron bajas: 693 empleados en la primera encuesta (cerca del 18 %) y 433 en la final (cerca del 11 %). Los resultados pueden no representar a todos los empleados.
- Según el informe de la ciudad, más del 40 % de los encuestados en la encuesta final vio algunas respuestas inapropiadas y casi la mitad estaba descontenta con la precisión de las respuestas. La ciudad planeaba pasar de ChatGPT-3.5-turbo a GPT-4.
- El informe de la ciudad dice que estaban previstos la adopción completa, un asesor de estrategia de IA y formación. Estas fuentes no cubren si se llevó a cabo.
Fuentes
- ChatGPT活用実証結果報告
City of Yokosuka, Digital Government Promotion Division · 2023-06-05 · Nota de prensa · city.yokosuka.kanagawa.jp
- Japan to use ChatGPT as a tool in city government
Government Transformation · 2023-06-27 · Noticia · government-transformation.com
Resumido con nuestras propias palabras a partir de las fuentes anteriores. ¿Ha detectado un error? Consulte correcciones.