Warum die Nichtindizierung syndizierter Inhalte der richtige Weg ist – Verfolgung syndizierter 3K-Nachrichtenartikel, um die Auswirkungen auf die Indexierung, das Ranking und den Verkehr auf Google-Oberflächen zu ermitteln [Fallstudie]
Veröffentlicht: 2023-08-04
Letzten Monat veröffentlichte John Shehata von NewzDash einen Blogbeitrag, in dem er eine Studie über die Auswirkungen der Syndizierung auf Nachrichtenverleger dokumentierte. Wenn beispielsweise ein Verlag Artikel an Syndizierungspartner syndiziert, welche Website rankt und wie sieht diese auf allen Google-Oberflächen (Suche, Google News usw.) aus?
Die Ergebnisse bestätigten, was viele im Laufe der Zeit in den SERPs gesehen haben, als sie bei Nachrichtenverlagen arbeiteten oder ihnen halfen. Google kann den Syndication-Partner häufig im Vergleich zur Originalquelle einordnen, selbst wenn der syndizierte Inhalt auf Partnerseiten korrekt auf die Originalquelle kanonisiert ist.
Und zur Erinnerung: Google hat im Mai 2023 seine Dokumentation zur Kanonisierung aktualisiert und seine Empfehlung für syndizierte Inhalte überarbeitet. Google empfiehlt Syndizierungspartnern nun uneingeschränkt , Inhalte von Nachrichtenverlegern nicht zu indexieren , wenn der Verleger nicht mit diesem Syndizierungspartner in der Suche konkurrieren möchte. Google erklärte, dass rel canonical nicht ausreicht, da die Originalseite und die Seite auf der Website des Syndication-Partners oft unterschiedlich sein können (wenn man die gesamte Seite einschließlich des Boilerplates, anderer ergänzender Inhalte usw. berücksichtigt). Daher sind die Systeme von Google nicht ausreichend Es kann vermutlich schwierig sein, festzustellen, dass es sich um denselben Artikel handelt, der syndiziert wird, und dann die falsche Version oder sogar beides einzustufen. Mehr zu dieser Situation erfahren Sie bald, wenn ich die Fallstudie behandle …

Und hier finden Sie Informationen aus der Google-Dokumentation für Nachrichtenverleger zur Vermeidung von Duplikatproblemen in Google News mit syndizierten Inhalten:

Zuvor hat Google gesagt, dass Sie rel canonical verwenden könnten, um auf die Originalquelle zu verweisen und gleichzeitig einen Link zurück zur Originalquelle bereitzustellen, was den Systemen dabei geholfen hätte, die kanonische URL (und die Originalquelle) zu ermitteln. Und um fair gegenüber Google zu sein, wurde in der Vergangenheit auch erklärt, dass man den Inhalt nicht indizieren könne, um Probleme zu vermeiden. Aber wie jeder, der mit Nachrichtenverlegern arbeitet, weiß, ist es eine schwierige Situation, von Syndizierungspartnern zu verlangen, dass sie diese Inhalte nicht indizieren, um eine Genehmigung zu erhalten. Ich möchte diesen Beitrag nicht mit der Behandlung dieses Themas versäumen, aber die meisten Syndizierungspartner möchten tatsächlich für den Inhalt ranken (daher ist es unwahrscheinlich, dass sie den syndizierten Inhalt, den sie konsumieren, nicht indizieren).
Ihre Gespräche mit ihnen könnten so aussehen:

Die Fallstudie: Ein klares Beispiel für Syndizierungsprobleme bei Nachrichtenverlegern.
OK, wir wissen also, dass Google empfiehlt, Inhalte auf der Website des Syndication-Partners nicht zu indizieren und die Verwendung von rel canonical als Lösung zu vermeiden. Doch wie sieht das alles eigentlich in den SERPs aus? Wie schlimm ist die Situation, wenn der Inhalt nicht indexiert ist? Und hat es Auswirkungen auf alle Google-Oberflächen wie die Suche, Top Stories, den News-Tab in der Suche, Google News und Discover?
Nun, ich habe beschlossen, mich für einen Kunden zu engagieren, der Inhalte in großem Umfang an Partner-Websites syndiziert. Sie haben es schon lange getan, aber die wahren Auswirkungen nie wirklich verstanden. Nachdem ich die Studie von NewzDash geschickt hatte, telefonierten wir mit mehreren Personen aus der gesamten Organisation. Es war klar, dass alle wissen wollten, wie viel Sichtbarkeit sie durch die Syndizierung von Inhalten verlieren, wo sie diese Sichtbarkeit verlieren, ob sich dies auch auf die Indexierung von Inhalten auswirkt und vieles mehr. Als ersten Schritt beschloss ich daher, ein System zu entwickeln, um mit der Erfassung von Daten zu beginnen, die dabei helfen könnten, potenzielle Syndizierungsprobleme zu identifizieren. Ich werde das als nächstes behandeln.
Der Test: Überprüfung kürzlich veröffentlichter 3K-URLs, die auch an Partner syndiziert werden.
Ich trat einen Schritt zurück und begann, ein System zu entwerfen, um die Syndication-Situation so gut wie möglich auf der Grundlage der Google-APIs (einschließlich der Search Console API und der URL Inspection API) zu verfolgen. Mein Ziel war es zu verstehen, wie Google mit den neuesten dreitausend veröffentlichten URLs umgeht, und zwar unter Sichtbarkeits-, Indexierungs- und Leistungsgesichtspunkten auf allen Google-Oberflächen (Suche, Top Stories, die Registerkarte „News“ in der Suche und Discover).
Hier ist das System, das ich entworfen habe:
- Exportieren Sie die neuesten dreitausend URLs basierend auf der Google News-Sitemap.
- Führen Sie die URLs über die URL-Inspektions-API aus, um die Indizierung in großen Mengen zu überprüfen (um alle Arten von Indizierungsproblemen zu identifizieren, z. B. wenn Google den Syndizierungspartner als kanonische gegenüber der ursprünglichen Quelle auswählt). Wenn die Seiten nicht indiziert wären, hätten sie eindeutig kein Ranking …
- Überprüfen Sie dann die Leistungsdaten für jede URL in großen Mengen über die Search Console API. Dazu gehörten Daten für die Suche, die Registerkarte „News“ in der Suche, Google News und Discover.
- Identifizieren Sie anhand dieser Daten indizierte URLs ohne (oder nur sehr wenige) Leistungsdaten als Kandidaten für Syndizierungsprobleme. Wenn die URLs keine Impressionen oder Klicks ergaben, lag möglicherweise ein Syndication-Partner im Ranking vor meinem Kunden.
- Überprüfen Sie die SERPs stichprobenartig, um zu sehen, wie Google die URLs aus Ranking-Perspektive auf allen Oberflächen gehandhabt hat.
Kein Reim oder Grund: Was ich fand, beunruhigte mich noch mehr, als ich gedacht hatte.
Zuerst erfolgte die Indexierungsprüfung über dreitausend URLs, die sehr gut verlief. Fast alle URLs wurden von Google indexiert. Und es gab keine Beispiele dafür, dass Google Syndication-Partner fälschlicherweise als kanonisch ausgewählt hat. Das war großartig und hat mich ein wenig überrascht. Ich dachte, ich würde das zumindest für einige der URLs sehen.

Als Nächstes habe ich die Leistungsdaten für die letzten dreitausend URLs in großen Mengen exportiert. Nach dem Export konnte ich URLs mit sehr wenigen oder keinen Leistungsdaten auf allen Oberflächen isolieren. Dies waren großartige Kandidaten für potenzielle Syndizierungsprobleme. Das heißt, wenn der Inhalt keine Impressionen oder Klicks hervorbrachte, war möglicherweise ein Syndication-Partner im Vergleich zu meinem Kunden im Ranking.


Und dann begann ich, die SERPs stichprobenartig zu überprüfen. Nachdem ich eine Reihe von Abfragen anhand der Liste der gemeldeten URLs überprüft hatte, gab es keinen Sinn oder Grund dafür, warum Google die URLs meines Kunden im Vergleich zu den Syndizierungspartnern (oder umgekehrt) anzeigte. Und um die Sache noch komplizierter zu machen, rangierten manchmal beide URLs in den Top Stories, in der Suche usw. Und dann gab es Zeiten, in denen eine in den Top Stories und die andere in der Suche rangierte. Das Gleiche galt für die Registerkarte „News“ in der Suche und in Google News. Es war eine Katastrophe…
Ich werde unten ein kurzes Beispiel liefern, damit Sie das Syndication-Durcheinander sehen können. Beachten Sie, dass ich die SERPs in den folgenden Screenshots stark verwischen musste, aber ich wollte ein Beispiel für das liefern, was ich gefunden habe. Auch hier gab es keinen Sinn oder Grund dafür, warum dies geschah. Basierend auf diesem Beispiel und dem, was ich in anderen von mir überprüften Beispielen gesehen habe, kann ich verstehen, warum Google sagt, die URLs nachgelagerter Syndizierungspartner sollten nicht indexiert werden. Wenn nicht, könnte irgendetwas davon passieren.
Hier ist zunächst ein Beispiel für das Ranking von Yahoo Finance in den Top Stories, während das Original in der Suche direkt darunter rangiert:

Als nächstes rangiert Yahoo News auf der Registerkarte „News“ in der Suche (die für meinen Kunden eine wichtige Oberfläche ist) auf dem zweiten Platz, während die Originalquelle nirgends zu finden ist. Und das Logo meines Kunden wird für den syndizierten Inhalt angezeigt. Wie schön…

Und dann sind in Google News die ursprünglichen Quellenrankings und Syndizierungspartner nirgendwo zu finden:

Wie Sie sehen, ist die Situation ein Chaos … und viel Glück beim Versuch, dies regelmäßig zu verfolgen. Und der Verlust an Sichtbarkeit auf Tausenden von Seiten pro Monat könnte sich wirklich summieren … Es ist schwer, die genaue Anzahl der verlorenen Impressionen und Klicks zu bestimmen, aber für große Nachrichtenverlage kann sie enorm sein.
Entdecken Sie: Das personalisierte Schwarze Loch
Und was Discover betrifft, ist es schwierig, die verlorene Sichtbarkeit dort nachzuverfolgen, da der Feed personalisiert ist und man unmöglich sehen kann, was jede andere Person in ihrem eigenen Feed sieht. Möglicherweise finden Sie jedoch Beispiele für Syndizierungspartner, die dort im Vergleich zu Ihren eigenen Inhalten ranken. Unten ist ein Beispiel, das ich kürzlich für ein Yahoo Finance-Ranking in Discover für einen Insider Monkey-Artikel gefunden habe. Beachten Sie, dass Insider Monkey kein Client und nicht die Website ist, die ich in der Fallstudie behandele, aber es ist ein gutes Beispiel dafür, was in Discover passieren kann. Und wenn dies häufig passiert, könnte die Website eine Menge Traffic verlieren …
Hier ist das Ranking von Yahoo Finance in Discover:

Und hier ist der Originalartikel über Insider Monkey (allerdings im Diashow-Format). Dieses Beispiel zeigt, wie Google erkennen kann, dass die Seiten unterschiedlich sind, was zu Problemen beim Verständnis führen kann, dass es sich um denselben Artikel handelt:

Und hier ist Yahoo Finance auf Platz 2 für das Ziel-Keyword in den Kern-SERPs. Der Syndizierungspartner rangiert in den Suchergebnissen also über dem Original:

Wichtige Punkte und Empfehlungen für Nachrichtenverleger, die sich mit Syndizierungsproblemen befassen:
- Versuchen Sie zunächst, Indexierungs- und Sichtbarkeitsprobleme so gut wie möglich zu verstehen. Verwenden Sie einen Ansatz, wie ich ihn beschrieben habe, um zumindest ein Gefühl dafür zu bekommen, wie schlimm das Problem ist. Die APIs von Google sind hier Ihre Freunde und Sie können viele URLs in kurzer Zeit massenhaft verarbeiten.
- Wägen Sie die Risiken und Vorteile der Syndizierung von Inhalten an Partner ab. Lohnt es sich, die zusätzliche Sichtbarkeit bei Partnern zu verlieren, wenn man in der Suche, in Top Stories, auf der Registerkarte „News“ in der Suche, in Google News und in Discover auf Sichtbarkeit verzichtet? Denken Sie daran, dass dies auch den Verlust leistungsstarker Links bedeuten kann. Wenn beispielsweise der Syndication-Partner einen Rang einnimmt und andere Websites auf diese Artikel verlinken, verlieren Sie diese Links.
- Sprechen Sie bei Bedarf mit Syndizierungspartnern über eine mögliche Nichtindizierung der syndizierten Inhalte. Das wird wahrscheinlich NICHT gut gehen ... Auch hier möchten sie oft ein Ranking erstellen, um diesen Traffic zu erhalten. Aber man weiß ja nie ... manche sind vielleicht damit einverstanden, die URLs nicht zu indizieren.
- Beachten Sie, dass Discover schwer zu verfolgen ist, sodass Sie dort möglicherweise mehr Traffic verlieren, als Sie denken (und vielleicht sogar viel). Möglicherweise stoßen Sie dort in freier Wildbahn auf Syndizierungsprobleme, aber Sie können nicht einfach dorthin gehen und Syndizierungsprobleme leicht finden (wie es mit der Suche, den Top-Storys, der Registerkarte „News“ und Google News möglich ist).
- Tools wie SEMrush und NewzDash können dabei helfen, die Lücken im Hinblick auf die Rangverfolgung zu schließen. Und NewzDash konzentriert sich auf Nachrichtenverleger, sodass dies ein wertvolles Tool in Ihrem Tracking-Arsenal sein könnte. SEMrush könnte bei der Suche und den Top Stories helfen. Versuchen Sie auch hier, ein solides Gefühl für Sichtbarkeitsprobleme aufgrund der Syndizierung von Inhalten zu bekommen.
Zusammenfassung – Syndication-Probleme für Nachrichtenverleger könnten schlimmer sein, als Sie denken.
Wenn Sie Inhalte syndizieren, empfehle ich Ihnen, sich ein Bild davon zu machen, was in den SERPs (und auf den Google-Oberflächen) vor sich geht. Und dann einen Angriffsplan für den Umgang mit der Situation entwerfen. Dazu kann gehören, dass die Dinge so bleiben, wie sie sind, oder dass Änderungen an Ihrer Syndizierungsstrategie erforderlich werden. Der erste Schritt besteht jedoch darin, sich einen Überblick über die Situation zu verschaffen (Wortspiel beabsichtigt). Viel Glück.
GG