Sin embargo, esta publicación rara vez atrae mucha atención, a diferencia de, digamos, Fox News. ¡Y hay buenas razones para ello! Fox News es un teatro del absurdo con payasos, y se merecen totalmente todas las críticas que reciben.
Pero siento curiosidad por el New York Times. Representan el mundo que los rodea bajo cierta luz, y su visión (al menos en mis círculos), aunque uno puede estar de acuerdo o en desacuerdo con ella, se percibe como algo aceptado por defecto.
Quería echar un vistazo más de cerca a esta visión. Por lo tanto, durante las próximas semanas, publicaré una serie de artículos en The New York Times, analizando los datos recopilados de la página de inicio de su sitio mediante web scraping, así como de la API oficial . El primer artículo se centrará única y exclusivamente en las pruebas A / B: cómo el New York Times prueba los titulares de los artículos y cómo cambian con el tiempo.
Pruebas A / B y el New York Times
Mire, bueno, es 2021, preferiría sorprenderme si resulta que el New York Times no está probando los titulares de ninguna manera. Sí, ellos mismos lo hablan en texto plano :
“Además, el Times practica lo que se llama pruebas A / B de versiones digitales de titulares para el contenido de la página de inicio: durante aproximadamente media hora, se muestra un titular a la mitad de los lectores y otro titular alternativo mitad. Al final de la prueba, The Times deja el titular que atrae a más lectores ".
Pero todavía tenía preguntas:
- ¿Cuántos artículos pasan por las pruebas A / B?
- ¿Cuántos títulos se repiten para cada uno?
- ¿Tiene algún sentido esto?
- ¿Qué tan diferentes son los titulares?
Metodología
Escribí un guión que hace lo siguiente:
- Raspando la página de inicio del sitio web del New York Times.
- Extrae todos los encabezados del conjunto de datos.
- Los vincula a los metadatos del artículo proporcionados en la API oficial de Times.
- Empuja todo en la mesa
El script se ejecuta cada cinco minutos. Comencé mi observación el 13 de febrero, por lo que a continuación se muestran las conclusiones basadas en los datos que se recopilaron durante tres semanas.
resultados
De acuerdo con su declaración, el New York Times realiza pruebas A / B de los titulares de los artículos. En algún lugar del 29% de los materiales tienen varios títulos. Actualmente, el número máximo de títulos anotados para un artículo es de ocho .
En muchos casos, los cambios se reducen a correcciones menores: a menudo sucede en el sitio web del New York Times que un error de ortografía o puntuación se corrige después de la publicación. ¿Y también sucede que los redactores parecen incapaces de decidir si escribir una excusa con mayúscula o con minúscula?
En otros casos, el New York Times cambia su titular a medida que se dispone de nueva información. Aquí hay una historia apasionante que se compone de una cadena de títulos:
- SpaceX lanzará otro prototipo de cohete a Marte en modo de prueba (10%)
- SpaceX ha suspendido las pruebas de un prototipo de cohete para volar a Marte (1%)
- SpaceX hará otro intento de lanzar un prototipo de cohete a Marte (13%)
- El prototipo de cohete de SpaceX fue a Marte, aterrizó y explotó (14%)
- El prototipo de cohete de SpaceX esta vez logró aterrizar en Marte antes de la explosión (24%)
- El prototipo de cohete de SpaceX esta vez logra aterrizar en Marte antes de la explosión (10%)
- El prototipo de cohete de SpaceX explotó después de aterrizar en Marte (27%)
Pero en su mayor parte, el cambio de título es claramente el resultado de las pruebas A / B realizadas para recopilar más clics. Por ejemplo, aquí hay un artículo sobre Biden y su política de gestión: su título ha cambiado radicalmente.
- Habla tranquila y programa a gran escala (7%)
- Biden está en contra de Trump y funciona (93%)
El único objetivo que pueden perseguir estos reemplazos es aumentar el compromiso. ¡Y funciona! Este artículo se puso de moda solo unas horas después de que se cambiara el titular (y esto confirma mi hipótesis de que a los liberales les encanta leer algo sobre Trump).
Pero no todas las pruebas A / B tienen éxito. Aquí hay un ejemplo de una prueba A / B que claramente falló: es posible que deba forzar la vista para ver un pequeño punto azul sobre un fondo rojo.
- ¿Has visto cuántos israelíes acaban de visitar los Emiratos Árabes Unidos? (cien%)
- ¡Josaphat nervioso! ¿Has visto cuántos israelíes acaban de visitar los Emiratos Árabes Unidos? (0%)
Espero que este fracaso no haya desanimado al extraño editor que pensó en Josaphat the Jumper. Lo que le falta al New York Times son referencias a la caricatura de Bugs Bunny .
Pero, en general, hay un patrón en los cambios: con el tiempo, los titulares tienden a sonar más dramáticos. Tomemos, por ejemplo, un artículo sobre Cuomo y el escándalo que rodea su vida sexual:
- Cuomo bajo ataque por su plan para investigar acusaciones de acoso (6%)
- Asediado por ataques, Cuomo cambia de plan para investigar acusaciones de acoso (25%)
- Asediado por acusaciones de acoso, Cuomo se disculpa (69%)
Después del primer reemplazo, resulta que Cuomo no solo está siendo atacado, sino literalmente sitiado, y después del segundo, pasa abruptamente de una simple revisión de planes a una disculpa. Además, la táctica funcionó: en los gráficos, se puede ver cómo, a medida que se ajusta el título, el artículo sube cada vez más en la calificación de espectadores.
En el artículo sobre el discurso de Trump en la conferencia conservadora, todo resulta aún más incendiario:
- Trump hace un llamamiento a los conservadores y planea liderar el partido republicano (3%)
- Trump revela planes para liderar el partido republicano en conferencia conservadora (7%)
- Trump se proclama líder republicano en discurso en conferencia conservadora (2%)
- Trump insinúa un tercer mandato en la conferencia conservadora y se compromete a llevar a los republicanos a la unidad (4%)
- Trump se compromete a llevar a los republicanos a la unidad, luego culpa a quienes apoyaron el juicio político (6%)
- Trump revela las bajas republicanas en una conferencia conservadora, un disparo de advertencia para todo el partido (79%)
Todo comienza con Trump hablando con los conservadores y declarándose líder del Partido Republicano, pero el último título se reduce a las listas de víctimas y disparos de advertencia. Y -quien lo hubiera dudado- debido a todo este patetismo, el artículo despega y cae en el número de "más leídos".
Bueno, el último ejemplo es un artículo sensacional basado en una entrevista que Meghan Markle le dio a Oprah:
- , – , (3%)
- , – , (1%)
- , (80%)
- « »: , (16%)
Ni siquiera fui demasiado perezoso para ver esta entrevista de dos horas y puedo decirles que los dos primeros títulos reflejan su contenido muchas veces mejor. Sí, Meghan admite tener pensamientos suicidas, pero este es un interludio de cinco minutos en una entrevista que dijo muchas otras cosas. Por ejemplo, ningún titular menciona el impacto del racismo en el estado mental de Meghan, y a este tema se le ha dado mucho más tiempo que los pensamientos suicidas.
¿Hay algún efecto?
Los artículos en los que me dediqué anteriormente han recibido mucha atención adicional gracias a las pruebas A / B. Pero, ¿qué pasa con los otros materiales?
Hice algunos cálculos y descubrí que para los artículos que pasan por el procedimiento de prueba, la probabilidad de estar "calientes" aumenta en un 80%. Además, como era de esperar, la cantidad total de titulares probados se correlaciona con una mayor participación .
Descargo de responsabilidad: existe una correlación entre el número de titulares y el compromiso, pero es difícil determinar cuál de ellos es la causa y cuál el efecto. En mi opinión, es lógico suponer que cuantas más variaciones de titulares se prueben, es más probable que las personas lean, me gusten o compartan en las redes sociales. Por otro lado, es posible que el New York Times esté dedicando más tiempo a pulir artículos que ya han despertado el interés público. Aunque, en el marco de las observaciones privadas, debo decir que muchos de los artículos que revisé pasaron por una serie de titulares incluso antes de que tomaran la iniciativa.
Entonces, ¿qué he aprendido?
The New York Times realiza pruebas de titulares A / B para aumentar la participación de los lectores
.
En general, las pruebas no se aplican de forma generalizada.
En realidad, me sorprende un poco que las pruebas cubran una cantidad tan pequeña de títulos. Para la mayoría de los artículos, la prueba no se aplica en absoluto y, donde se aplica, por regla general, solo se utilizan dos títulos.
Supuse vagamente que los editores del New York Times exigían a los empleados que enviaran todos los artículos con, bueno, seis títulos, y algún sistema automatizado ejecutaría los seis en la primera hora. Pero obviamente este no es el caso, aunque los datos sugieren que las pruebas A / B más agresivas habrían resultado en un mayor compromiso.
Una posible explicación: el 62% de las ganancias del New York Times provienen de las suscripciones y solo el 27% de la publicidad (y esta cifra está disminuyendo cada año). Esto significa que las vistas no son tan importantes como las suscripciones, y si hay un clickbait continuo en la página de inicio, puede asustar a los posibles suscriptores.
Y, sin embargo, el resultado son titulares que golpean las emociones.
El New York Times, por supuesto, no se rebaja al nivel de BuzzFeed, pero, sin embargo, hay que tener en cuenta que su visión de las cosas tampoco puede calificarse de neutral. Como muestran los ejemplos anteriores, después de las pruebas A / B, los titulares dan a los eventos un color mucho más dramático de lo que realmente dan. Aquellos que leen constantemente este recurso pueden tener la impresión de que el mundo es más aterrador e impredecible de lo que realmente es.
Más lejos
En el próximo artículo, exploraré la página de inicio del sitio web del New York Times, a saber:
- ¿Cuánto tiempo están colgando los artículos allí?
- ¿Cuáles de los artículos se retrasan allí y cuáles se van rápidamente?
- Qué tipo de contenido aparece con más frecuencia en la página de inicio y cuál es menos probable
- Cómo el tiempo dedicado a la página de inicio se correlaciona con el compromiso general
- Y otras cosas interesantes.
Datos
Si mi instancia EC2 gratuita todavía está activa, puede realizar un seguimiento de los datos del encabezado usted mismo en tiempo real. Solo ten en cuenta dos cosas: los datos se presentan a partir del 13 de febrero de 2021 y llegan con un ligero retraso, ya que la caché se actualiza cada treinta minutos.