Relevo, un sitio español de noticias deportivas conocido por su innovadora página de inicio móvil que imita la apariencia de los reels de TikTok o Instagram, se lanzó en octubre de 2022. Aunque su objetivo es crear una audiencia cruzada de fanáticos de los deportes, se centra en la nueva generación. Z y Millennials, que se sienten desconectados o desilusionados con la cobertura deportiva tradicional.

Para aprovechar al máximo la interfaz innovadora y medir el éxito, la sala de redacción introdujo una nueva métrica personalizada y codificación impulsada por IA. Esto condujo a una mejora La interacción con la página de inicio aumentó en un tercio En apenas dos meses.

El proyecto también demostró que los no programadores del equipo pudieron utilizar eficazmente la IA generativa para crear herramientas de software esenciales para abordar los desafíos de una sala de redacción digital basada en datos.

Desde el lanzamiento de Relevo, los miembros del equipo han discutido activamente la longitud ideal de los titulares de la página de inicio. La sala de redacción gravitaba hacia titulares más largos, de 100 caracteres o más. El equipo de producto consideró que esto suponía demasiada carga cognitiva para los usuarios, lo que entraba en conflicto con el atractivo de una interfaz rápida. Rápidamente surgió un contraargumento: el desplazamiento con la ayuda de titulares más cortos podría disuadir a los usuarios de hacer clic en los titulares, lo que a su vez podría perjudicar a los usuarios. La métrica más sagrada de todas: las visitas a la página.

Entonces, el equipo de cuatro personas centró su atención en el objetivo: ¿cuál era el caso de uso ideal que imaginaban para su nuevo producto? Sólo entonces podrán discutir de manera significativa las métricas, dijo Germain Frassa, director de estrategia digital.

Crea una escala Pringles

El caso de uso que acordó la redacción fue si un usuario iría a la página de inicio de Relevo todos los días en su teléfono móvil. teléfonos, deslizando el dedo hasta encontrar un titular que capte su interés Atención, haz clic para leer el artículo, regresa, desplázate nuevamente, Luego haga clic y así sucesivamente. Al hacer este ejercicio, el equipo Lo tengo “Deslizamientos versus clics” era un falso dilema. Van de la mano. Uno lleva al otro.

No existe una unidad preparada para medir tanto la multiplicación como Haga clic, por lo que Relevo formuló su propia métrica híbrida agregando Deslizamientos y clics. le dispararon «el punto» (Arrastrar + hacer clic).

La fórmula es: (deslizar/visitar) 10 + (clics/visitar) 100

El equipo diseñó la plantilla pensando en los editores, por lo que tenía más que hacer. Ver con la psicología cognitiva de las matemáticas difíciles. Para hacer este número Más grande, redondo y más fácil de recordar, duplica ambos trazos. Y hace clic. En el caso de los clics, el factor es aún mayor porque Son menos repetitivos que los golpes y querían que los dos componentes tuvieran un tamaño más o menos similar.

Este estudio de caso es parte de un informe de investigación más profundo titulado «IA en el trabajo: 10 casos de uso global». Descarguelo aqui.

Usando inteligencia artificial para medir titulares

El objetivo del proyecto era romper el ciclo de discordia entre los equipos de redacción y de producto mediante:

• Identifique una nueva métrica (“spot”) mencionada anteriormente que pueda enmarcar adecuadamente el comportamiento de usuario deseado que Relevo busca con esta nueva interfaz de página de inicio.
• Utilice esta métrica para formular una hipótesis sobre la longitud del título: cuanto más cortos sean los títulos, más espacios.
• Probar esta hipótesis para acordar la mejor manera de aumentar la participación de los usuarios, para lo cual era crucial utilizar IA para piratear el software requerido.

Calcular la nueva escala fue sencillo. Utilizaron Adobe Analytics para determinar sus métricas. Sin embargo, medir los titulares fue algo diferente. «Nuestros desarrolladores web estaban completamente ocupados con otras iniciativas y sentimos que necesitábamos ser muy flexibles en el desarrollo de una solución para involucrar a todas las partes y captar su atención mientras el tema aún se estaba discutiendo», dijo Frasa.

A mediados de 2023, el equipo había estado utilizando herramientas de inteligencia artificial durante un tiempo a nivel individual para brindar soporte en diversas tareas editoriales y de productos, como resumir, traducir e identificar casos de uso. “Pero sabemos que la IA generativa también es buena para escribir código programático, como en muchas salas de redacción, algunas personas de nuestro equipo tienen conocimientos básicos de programación.

Y luego: ¿Qué pasaría si usaran IA para codificar una herramienta de raspado para extraer y medir titulares de la página de inicio?

En julio de 2023, el equipo comenzó a medir la longitud promedio de los caracteres de los titulares. Usamos ChatGPT Plus para desarrollar un script de Python que escanea la página de inicio cada 15 minutos, mide los titulares y guarda los datos en un archivo CSV.

El valor fue típico durante los primeros cinco meses de medición. 90 caracteres por título. La tendencia ha ido aumentando aproximadamente uno o dos caracteres por mes, como mínimo. 87 en julio y una cumbre 93 en noviembre. (Las palabras tienden a ser más largas en español que en inglés).

En tanto, el índice característico de este período fue 119. La mejor marca (132) se registró en septiembre, cuando Relevo saltó al protagonismo internacional gracias a la primicia en la cobertura del “Asunto Rubiales”.

“Calculamos el impresionante índice retrospectivamente hasta la fecha de lanzamiento y descubrimos que era más bajo: solo 93, en promedio, durante la primera mitad de 2023. Aunque no teníamos datos sobre la longitud de los titulares antes de julio, era Todos tenemos la impresión de que era más alto”, dijo Frassa.

Hacer visibles los datos

Aquí surgió de nuevo una hipótesis plausible: cuanto más corto sea el título, más anuncios.

Pero los datos deben ser visibles para poder actuar en consecuencia, y Relevo quería que sus editores estuvieran al tanto de esas cifras. ¿Cómo pueden hacer esto sin tener que construir ninguna infraestructura? Esta extensión del navegador Chrome fue la solución. Recurrieron a ChatGPT y rápidamente descubrieron que era experto en crear extensiones de Chrome.

La extensión (cuyo nombre en código es “Pringles” porque Relevo quería que sus titulares fueran pequeños y de forma uniforme, como las populares papas fritas) bombea caja morada La página que contiene datos actuales sobre los titulares, incluida la longitud de los caracteres. El equipo también creó un panel móvil en Adobe Analytics para poner los datos de los puntos al alcance de todos.

Con herramientas impulsadas por IA en juego, se ha promulgado una política editorial para publicar títulos más breves en diciembre de 2023.

Resultados y lecciones aprendidas

Tres meses después del lanzamiento, las cifras parecían confirmar la siguiente hipótesis: a medida que los titulares se hacían más cortos, las noticias se hacían más cortas. El Índice Macular mejoró a 142 De 107 en 2023 – un aumento del 32,7%. En una escala de -1 a 1, hay Coeficiente de correlación de Pearson de -0,7 entre la duración del título y los anuncios. «Aunque los estadísticos siempre nos recuerdan que correlación no significa causalidad, sin otras variables obvias, la tendencia sugiere fuertemente que cuanto más corto sea el título, mejor será la interacción», dijo Frasa.

Las métricas estándar también mejoraron significativamente, con Aumento del 19% en visitas a la página de inicio por visitanteY Aumento de las visitas a la página de inicio en un 26% Para cada visitante.

Frasa resumió las lecciones aprendidas:

• Las métricas no son un fin, sino simplemente un indicador para validar la interacción humana con los productos digitales.
• Está bien formular su propia medida para asegurarse de alcanzar su objetivo.
• La IA es una herramienta poderosa para respaldar roles híbridos en la sala de redacción y los equipos de productos.
• Las personas con conocimientos básicos de programación pueden convertirse en desarrolladores de software completos con la ayuda de la inteligencia artificial.
• Este nuevo «superpoder» puede ayudar al lado no técnico del equipo a preparar rápidamente iniciativas de software pequeñas y medianas sin distraer los recursos de ingeniería.