Por qué no indexar el contenido sindicado es el camino: seguimiento de artículos de noticias sindicados de 3K para determinar el impacto en la indexación, la clasificación y el tráfico en las superficies de Google [estudio de caso]

El mes pasado, John Shehata de NewzDash publicó una publicación de blog que documenta un estudio que cubre el impacto de la sindicación en los editores de noticias. Por ejemplo, cuando un editor distribuye artículos a socios de distribución, qué sitio clasifica y cómo se ve en las superficies de Google (Búsqueda, Google Noticias, etc.)

Los resultados confirmaron lo que muchos han visto en los SERP a lo largo del tiempo mientras trabajaban o ayudaban a los editores de noticias. A menudo, Google puede clasificar al socio de sindicación frente a la fuente original, incluso cuando el contenido sindicado en los sitios del socio se canonicaliza correctamente a la fuente original.

Y como recordatorio, Google actualizó su documentación sobre canonicalización en mayo de 2023 y revisó su recomendación para contenido sindicado. Google ahora recomienda totalmente que los socios de sindicación no indexen el contenido del editor de noticias si el editor no quiere competir con ese socio de sindicación en la Búsqueda. Google explicó que rel canonical no es suficiente ya que la página original y la página ubicada en el sitio web del socio de sindicación a menudo pueden ser diferentes (cuando se tiene en cuenta la página completa, incluido el texto estándar, otro contenido complementario, etc.). Por lo tanto, los sistemas de Google presumiblemente puede tener dificultades para determinar que es el mismo artículo que se está sindicando y luego clasificar la versión incorrecta, o incluso ambas cosas. Más sobre esa situación pronto cuando cubra el estudio de caso...

Y aquí hay información de la documentación de Google para editores de noticias sobre cómo evitar problemas de duplicación en Google News con contenido sindicado:

Anteriormente, Google dijo que podría usar rel canonical apuntando a la fuente original, al mismo tiempo que proporciona un enlace a la fuente original, lo que debería haber ayudado a sus sistemas a determinar la URL canónica (y la fuente original). Y para ser justos con Google, también explicaron en el pasado que no se podía indexar el contenido para evitar problemas. Pero como entiende cualquiera que trabaje con editores de noticias, pedir a los socios de sindicación que no indexen ese contenido es una situación difícil de aprobar. No empantanaré esta publicación cubriendo ese tema, pero la mayoría de los socios de sindicación en realidad quieren clasificar para el contenido (por lo que es poco probable que no indexen el contenido sindicado que están consumiendo).

Sus conversaciones con ellos podrían verse así:

El Caso de Estudio: Un claro ejemplo de los problemas de sindicación de los editores de noticias.
De acuerdo, sabemos que Google recomienda no indexar contenido en el sitio web del socio de sindicación y evitar el uso de rel canonical como solución. Pero, ¿cómo se ve todo esto realmente en los SERP? ¿Qué tan mala es la situación cuando el contenido no está indexado? ¿Y afecta a todas las superficies de Google, como la Búsqueda, las Historias destacadas, la pestaña Noticias en la Búsqueda, Google Noticias y Descubrir?

Bueno, decidí buscar un cliente que sindica en gran medida el contenido de los sitios web asociados. Lo han hecho durante mucho tiempo, pero nunca entendieron realmente el verdadero impacto. Después de enviar el estudio de NewzDash, tuvimos una llamada con varias personas de toda la organización. Estaba claro que todos querían saber cuánta visibilidad estaban perdiendo al sindicar contenido, dónde estaban perdiendo esa visibilidad, si eso también estaba afectando la indexación del contenido y más. Entonces, como primer paso, decidí diseñar un sistema para comenzar a capturar datos que pudieran ayudar a identificar posibles problemas de sindicación. Cubriré eso a continuación.

La prueba: verificar las direcciones URL publicadas recientemente de 3K que también se están sindicando a los socios.
Di un paso atrás y comencé a diseñar un sistema para rastrear la situación de sindicación lo mejor que pude en función de las API de Google (incluidas la API de Search Console y la API de inspección de URL). Mi objetivo era entender cómo Google estaba manejando las últimas tres mil URL publicadas desde el punto de vista de la visibilidad, el punto de vista de la indexación y el punto de vista del rendimiento en las superficies de Google (Búsqueda, Historias destacadas, la pestaña Noticias en la Búsqueda y Descubrir).

Aquí está el sistema que tracé:

• Exporte las últimas tres mil URL basadas en el mapa del sitio de Google News.
• Ejecute las URL a través de la API de inspección de URL para verificar la indexación en masa (para identificar cualquier tipo de problema de indexación, como que Google elija el socio de sindicación como la fuente canónica versus la fuente original). Si las páginas no estuvieran indexadas, entonces claramente no se clasificarían...
• Luego, verifique los datos de rendimiento de cada URL de forma masiva a través de la API de Search Console. Eso incluía datos para la Búsqueda, la pestaña Noticias en la Búsqueda, Google News y Discover.
• Basándose en esos datos, identifique las URL indexadas sin datos de rendimiento (o muy pocos) como candidatos para problemas de sindicación. Si las URL no tenían impresiones ni clics, entonces tal vez un socio de sindicación estaba posicionado frente a mi cliente.
• Verifique las SERP para ver cómo Google estaba manejando las URL desde una perspectiva de clasificación en todas las superficies.

Sin rima ni razón: lo que encontré me molestó aún más de lo que pensaba.
Primero fue la verificación de indexación a través de tres mil URL, que salió muy bien. Casi todas las URL fueron indexadas por Google. Y no hubo ejemplos de que Google eligiera incorrectamente socios de sindicación como canónicos. Eso fue genial y me sorprendió un poco. Pensé que vería eso para al menos algunas de las direcciones URL.

A continuación, exporté datos de rendimiento de forma masiva para las últimas tres mil URL. Una vez exportados, pude aislar URL con muy pocos o ningún dato de rendimiento en todas las superficies. Estos eran excelentes candidatos para posibles problemas de sindicación. es decir, si el contenido no produjo impresiones ni clics, entonces tal vez un socio de sindicación se clasificó frente a mi cliente.

Y luego comencé a verificar las SERP. Después de verificar una serie de consultas basadas en la lista de direcciones URL que se marcaron, no había ninguna rima o razón por la que Google mostrara las direcciones URL de mi cliente frente a los socios de sindicación (o viceversa). Y para complicar aún más las cosas, a veces ambas direcciones URL se clasifican en Historias principales, Búsqueda, etc. Y luego hubo ocasiones en que una se clasificó en Historias principales mientras que la otra se clasificó en Búsqueda. Y lo mismo sucedió con la pestaña Noticias en la Búsqueda y Google Noticias. Fue un desastre…

Proporcionaré un ejemplo rápido a continuación para que pueda ver el lío de sindicación. Tenga en cuenta que tuve que difuminar mucho las SERP en las siguientes capturas de pantalla, pero quería dar un ejemplo de lo que encontré. Una vez más, no había rima ni razón por la que esto sucedía. Según este ejemplo, y lo que vi en otros ejemplos que verifiqué, puedo entender por qué Google dice que no indexe las URL en sentido descendente en los socios de sindicación. Si no, cualquiera de esto podría pasar.

En primer lugar, aquí hay un ejemplo de la clasificación de Yahoo Finance en las Historias principales, mientras que la clasificación original en la Búsqueda justo debajo de ella:

A continuación, Yahoo News se clasifica dos veces en la pestaña Noticias en la Búsqueda (que es una superficie importante para mi cliente), mientras que la fuente original no se encuentra por ninguna parte. Y el logotipo de mi cliente se muestra para el contenido sindicado. Que agradable…

Y luego, en Google News, las clasificaciones de fuentes originales y los socios de sindicación no se encuentran por ninguna parte:

Como puede ver, la situación es un desastre... y buena suerte tratando de rastrear esto regularmente. Y la visibilidad perdida en miles de páginas por mes realmente podría sumarse... Es difícil determinar el número exacto de impresiones y clics perdidos, pero puede ser enorme para los grandes editores de noticias.

Descubre: El agujero negro personalizado
Y con respecto a Discover, es difícil rastrear la visibilidad perdida allí, ya que la fuente está personalizada y no es posible que pueda ver lo que otras personas ven en su propia fuente. Pero puede encontrar ejemplos en la naturaleza de socios de sindicación que se clasifican allí en comparación con su propio contenido. A continuación se muestra un ejemplo que encontré recientemente de la clasificación de Yahoo Finance en Discover para un artículo de Insider Monkey. Tenga en cuenta que Insider Monkey no es un cliente ni el sitio que cubro en el estudio de caso, pero es un buen ejemplo de lo que puede suceder en Discover. Y si esto sucede con frecuencia, el sitio podría estar perdiendo mucho tráfico...

Aquí está el ranking de Yahoo Finance en Discover:

Y aquí está el artículo original sobre Insider Monkey (pero está en formato de presentación de diapositivas). Este ejemplo muestra cómo Google puede ver que las páginas son diferentes, lo que puede causar problemas para entender que son el mismo artículo:

Y aquí está el puesto número 2 de Yahoo Finance para la palabra clave objetivo en los SERP principales. Por lo tanto, el socio de sindicación está clasificado por encima del original en los resultados de búsqueda:

Puntos clave y recomendaciones para los editores de noticias que se enfrentan a problemas de sindicación:

• Primero, intente comprender los problemas de indexación y visibilidad lo mejor que pueda. Use un enfoque como el que tracé para al menos tener una idea de qué tan grave es el problema. Las API de Google son sus amigos aquí y puede procesar en masa muchas URL en un corto período de tiempo.
• Sopese los riesgos y beneficios de distribuir contenido a los socios. ¿Vale la pena perder la visibilidad adicional entre los socios en la Búsqueda, las Historias destacadas, la pestaña Noticias en la Búsqueda, Google Noticias y Discover? Recuerde, esto también podría significar una pérdida de enlaces poderosos... Por ejemplo, si el socio de sindicación clasifica y otros sitios enlazan a esos artículos, usted está perdiendo esos enlaces.
• Si es necesario, hable con los socios de sindicación sobre la posibilidad de no indexar el contenido sindicado. Esto probablemente NO irá bien... De nuevo, a menudo quieren posicionarse para obtener ese tráfico. Pero nunca se sabe... algunos podrían estar bien sin indexar las URL.
• Comprende que Discover es difícil de rastrear, por lo que es posible que estés perdiendo más tráfico de lo que crees (y tal vez mucho). Es posible que detecte algunos problemas de sindicación allí en la naturaleza, pero no puede simplemente ir allí y encontrar problemas de sindicación fácilmente (como puede hacerlo con la Búsqueda, las Historias destacadas, la pestaña Noticias y Google Noticias).
• Herramientas como Semrush y NewzDash pueden ayudar a llenar los vacíos desde una perspectiva de seguimiento de rango. Y NewzDash se enfoca en los editores de noticias, por lo que podría ser una herramienta valiosa en su arsenal de seguimiento. Semrush podría ayudar con la Búsqueda y las Historias destacadas. Nuevamente, intente obtener una idea sólida de los problemas de visibilidad debido a la distribución de contenido.

Resumen: los problemas de sindicación para los editores de noticias pueden ser peores de lo que piensa.
Si está distribuyendo contenido, le recomiendo que intente comprender lo que sucede en los SERP (y en todas las superficies de Google). Y luego forme un plan de ataque para hacer frente a la situación. Eso podría incluir mantener las cosas como están, o podría generar cambios en su estrategia de sindicación. Pero el primer paso es ganar algo de visibilidad de la situación (juego de palabras). Buena suerte.

GG