비인덱싱 신디케이트 콘텐츠가 방법인 이유 – 3K 신디케이트 뉴스 기사를 추적하여 Google 표면 전체에서 인덱싱, 순위 및 트래픽에 미치는 영향 확인 [사례 연구]

지난 달 NewzDash의 John Shehata는 신디케이션이 뉴스 게시자에게 미치는 영향을 다루는 연구를 문서화한 블로그 게시물을 게시했습니다. 예를 들어 발행인이 신디케이션 파트너에게 기사를 신디케이트할 때 Google 표면(검색, Google 뉴스 등)에서 어떤 사이트의 순위가 매겨지고 어떤 모습인지 알 수 있습니다.

그 결과 많은 사람들이 뉴스 퍼블리셔에서 일하거나 돕는 동안 SERP에서 시간이 지남에 따라 본 것을 확인했습니다. Google은 파트너 사이트의 신디케이트된 콘텐츠가 원본 소스로 올바르게 표준화된 경우에도 종종 원본 소스와 신디케이션 파트너의 순위를 매길 수 있습니다.

참고로 Google은 2023년 5월 표준화에 대한 문서를 업데이트하고 신디케이트 콘텐츠에 대한 권장 사항을 수정했습니다. 게시자가 Google 검색에서 해당 신디케이션 파트너와 경쟁하기를 원하지 않는 경우 Google은 이제 신디케이션 파트너가 뉴스 게시자 콘텐츠를 색인에 추가하지 않도록 완전히 권장합니다. 원본 페이지와 신디케이션 파트너 웹사이트에 있는 페이지가 다른 경우가 많기 때문에(보일러플레이트, 기타 보충 콘텐츠 등을 포함한 전체 페이지를 고려할 때) rel canonical이 충분하지 않다고 Google은 설명했습니다. 신디케이트되는 동일한 기사인지 확인하고 잘못된 버전 또는 둘 다의 순위를 매기는 데 어려움을 겪을 수 있습니다. 사례 연구를 다룰 때 곧 그 상황에 대해 더 자세히…

다음은 신디케이트된 콘텐츠가 있는 Google 뉴스에서 중복 문제를 방지하는 방법에 대한 뉴스 게시자를 위한 Google 문서의 정보입니다.

이전에 Google은 원래 소스를 가리키는 rel canonical을 사용할 수 있으며 원래 소스로 다시 링크를 제공하여 시스템에서 정식 URL(및 원래 소스)을 결정하는 데 도움이 되었을 것이라고 밝혔습니다. 그리고 Google에 공평하게 말하면 그들은 과거에 문제를 피하기 위해 콘텐츠를 색인화하지 않을 수 있다고 설명했습니다. 그러나 뉴스 게시자와 함께 일하는 모든 사람이 이해하듯이 신디케이션 파트너에게 콘텐츠가 승인되기 어려운 상황이라는 것을 색인에 추가하지 않도록 요청하는 것은 이해합니다. 해당 주제를 다루면서 이 게시물을 수렁에 빠뜨리지는 않겠지만, 대부분의 신디케이션 파트너는 실제로 콘텐츠에 대한 순위를 매기기를 원합니다 (그래서 그들이 소비하는 신디케이트된 콘텐츠를 색인화하지 않을 가능성이 높음).

그들과의 대화는 다음과 같을 수 있습니다.

사례 연구: 뉴스 게시자 신디케이션 문제의 명확한 예입니다.
알겠습니다. Google에서는 신디케이션 파트너 웹사이트에서 콘텐츠를 색인 생성하지 않고 솔루션으로 rel canonical을 사용하지 않도록 권장한다는 것을 알고 있습니다. 하지만 이 모든 것이 실제로 SERP에서 어떻게 보일까요? 콘텐츠가 색인화되지 않은 경우 상황이 얼마나 나쁩니까? 그리고 검색, 주요 뉴스, 검색의 뉴스 탭, Google 뉴스, 디스커버와 같은 모든 Google 플랫폼에 영향을 미치나요?

글쎄, 나는 파트너 웹 사이트에 콘텐츠를 많이 신디케이트하는 클라이언트를 찾기로 결정했습니다. 그들은 오랫동안 이해했지만 진정한 영향을 실제로 이해하지 못했습니다. NewzDash에서 연구 결과를 보낸 후 조직 전체의 여러 사람과 전화 통화를 했습니다. 모든 사람이 콘텐츠를 신디케이트함으로써 얼마나 많은 가시성을 잃고 있는지, 어디에서 가시성을 잃고 있는지, 그것이 콘텐츠 색인 생성에도 영향을 미치는지 등을 알고 싶어했습니다. 그래서 첫 번째 단계로 잠재적 신디케이션 문제를 식별하는 데 도움이 될 수 있는 데이터 캡처를 시작하는 시스템을 만들기로 결정했습니다. 다음에 다루겠습니다.

테스트: 파트너에게 신디케이트되는 최근 게시된 3K URL을 확인합니다.
저는 한 걸음 뒤로 물러나 Google의 API(Search Console API 및 URL Inspection API 포함)를 기반으로 최선을 다해 신디케이션 상황을 추적하기 위한 시스템을 만들기 시작했습니다. 내 목표는 가시성 관점, 색인 생성 관점, Google 표면(검색, 주요 뉴스, 검색의 뉴스 탭 및 발견)에서 성능 관점에서 게시된 최근 3,000개의 URL을 Google이 어떻게 처리하고 있는지 이해하는 것이었습니다.

제가 계획한 시스템은 다음과 같습니다.

• Google 뉴스 사이트맵을 기반으로 최근 3,000개의 URL을 내보냅니다.
• URL Inspection API를 통해 URL을 실행하여 인덱싱을 대량으로 확인합니다(Google이 신디케이션 파트너를 표준 소스와 원본 소스로 선택하는 것과 같은 모든 유형의 인덱싱 문제를 식별하기 위해). 페이지가 인덱싱되지 않았다면 분명히 순위가 매겨지지 않았을 것입니다...
• 그런 다음 Search Console API를 통해 각 URL의 성능 데이터를 일괄적으로 확인합니다. 여기에는 검색, 검색의 뉴스 탭, Google 뉴스 및 디스커버에 대한 데이터가 포함되었습니다.
• 해당 데이터를 기반으로 성능 데이터가 없는(또는 매우 적은) 인덱싱된 URL을 신디케이션 문제의 후보로 식별합니다. URL에 노출이나 클릭이 없는 경우 신디케이션 파트너가 내 클라이언트와 순위를 매겼을 수 있습니다.
• Google이 표면 전체의 순위 관점에서 URL을 처리하는 방법을 보려면 SERP를 무작위로 확인하십시오.

운율이나 이유 없음: 내가 찾은 것은 내가 생각했던 것보다 훨씬 더 나를 혼란스럽게 했습니다.
첫 번째는 3,000개의 URL에 대한 인덱싱 확인으로 매우 잘 진행되었습니다. 거의 모든 URL이 Google에 의해 인덱싱되었습니다. Google이 신디케이션 파트너를 표준으로 잘못 선택한 예도 없었습니다. 그것은 훌륭했고 조금 놀랐습니다. 나는 적어도 일부 URL에 대해 그것을 볼 것이라고 생각했습니다.

다음으로 최근 3,000개의 URL에 대한 성능 데이터를 대량으로 내보냈습니다. 내보낸 후에는 여러 표면에서 성능 데이터가 거의 또는 전혀 없는 URL을 분리할 수 있었습니다. 이들은 잠재적 신디케이션 문제에 대한 훌륭한 후보였습니다. 즉, 콘텐츠에 노출이나 클릭이 발생하지 않으면 신디케이션 파트너가 내 클라이언트보다 순위를 매겼을 수 있습니다.

그런 다음 SERP를 무작위로 확인하기 시작했습니다. 신고된 URL 목록을 기반으로 여러 검색어를 확인한 결과 Google이 신디케이션 파트너와 비교하여 내 고객의 URL을 표시하는 이유나 이유가 없었습니다(또는 그 반대). 설상가상으로, 때때로 두 URL 모두 Top Stories, Search 등에 순위가 매겨집니다. 그런 다음 한 URL은 Top Stories 순위에, 다른 URL은 검색 순위에 올랐습니다. 검색 및 Google 뉴스의 뉴스 탭도 마찬가지였습니다. 엉망이었어…

신디케이션 혼란을 볼 수 있도록 아래에 간단한 예를 제공하겠습니다. 다음 스크린샷에서 SERP를 크게 흐리게 처리해야 했지만 내가 찾은 예를 제공하고 싶었습니다. 다시 말하지만, 운율이나 이런 일이 일어난 이유가 없었습니다. 이 예와 내가 확인한 다른 예에서 본 것을 기반으로 Google이 신디케이션 파트너의 URL 다운스트림을 색인 생성하지 말라고 말하는 이유를 이해할 수 있습니다. 그렇지 않은 경우 이런 일이 발생할 수 있습니다.

먼저, 다음은 Top Stories에서 Yahoo Finance 순위를 매긴 반면 원본은 그 바로 아래에 있는 검색 순위의 예입니다.

다음으로 야후 뉴스는 검색의 뉴스 탭(내 고객에게 중요한 표면)에서 두 번 순위에 올랐지만 원본 소스는 어디에도 없습니다. 그리고 신디케이트된 콘텐츠에는 내 클라이언트의 로고가 표시됩니다. 얼마나 좋은데…

그런 다음 Google 뉴스에서 원래 소스 순위 및 신디케이션 파트너를 찾을 수 없습니다.

보시다시피 상황이 엉망입니다. 정기적으로 이를 추적하는 데 행운을 빕니다. 그리고 한 달에 수천 페이지에 걸친 가시성 손실은 실제로 합산될 수 있습니다... 손실된 노출수 및 클릭수를 정확히 파악하기는 어렵지만 대형 뉴스 게시자에게는 엄청난 수치일 수 있습니다.

발견: 맞춤형 블랙홀
그리고 Discover와 관련하여 피드가 개인화되어 있고 다른 모든 사람이 자신의 피드에서 보고 있는 것을 볼 수 없기 때문에 가시성 손실을 추적하기가 어렵습니다. 그러나 자신의 콘텐츠와 순위를 매긴 신디케이션 파트너의 야생에서 예를 찾을 수 있습니다. 아래는 Insider Monkey 기사의 Discover에서 최근에 찾은 Yahoo Finance 순위의 예입니다. Insider Monkey는 사례 연구에서 다루고 있는 클라이언트나 사이트 가 아니지만 Discover 에서 발생할 수 있는 일의 좋은 예입니다. 그리고 이런 일이 많이 발생하면 사이트에서 엄청난 양의 트래픽이 손실될 수 있습니다…

Discover의 Yahoo Finance 순위는 다음과 같습니다.

그리고 여기 Insider Monkey에 대한 원본 기사가 있습니다(슬라이드쇼 형식임). 이 예는 Google에서 페이지가 다르다는 것을 확인하는 방법을 보여줍니다. 이로 인해 동일한 기사라는 것을 이해하는 데 문제가 발생할 수 있습니다.

그리고 여기 핵심 SERP의 대상 키워드에 대한 Yahoo Finance 순위 2위가 있습니다. 따라서 신디케이션 파트너는 검색 결과에서 원본보다 순위가 높습니다.

신디케이션 문제를 다루는 뉴스 게시자를 위한 핵심 사항 및 권장 사항:

• 먼저 인덱싱 및 가시성 문제를 최대한 이해하려고 노력하십시오. 적어도 문제가 얼마나 나쁜지에 대한 느낌을 얻기 위해 내가 계획한 것과 같은 접근 방식을 사용하십시오. Google의 API는 여기에서 여러분의 친구이며 단기간에 많은 URL을 일괄 처리할 수 있습니다.
• 콘텐츠를 파트너에게 신디케이트할 때의 위험과 이점을 비교하십시오. 검색, 주요 뉴스, 검색의 뉴스 탭, Google 뉴스 및 디스커버에서 가시성을 잃을 가치가 있는 파트너 간의 추가 가시성입니까? 이것은 또한 강력한 링크 의 손실을 의미할 수도 있음을 기억하십시오. 예를 들어, 신디케이션 파트너가 순위를 매기고 다른 사이트에서 해당 기사에 링크하는 경우 해당 링크가 손실됩니다.
• 필요한 경우 잠재적으로 신디케이트된 콘텐츠를 인덱싱하지 않는 것에 대해 신디케이션 파트너와 이야기하십시오. 이것은 아마도 잘 되지 않을 것입니다... 다시 말하지만, 그들은 종종 트래픽을 얻기 위해 순위를 매기기를 원합니다. 그러나 당신은 결코 알 수 없습니다… 일부는 URL을 색인화하지 않아도 괜찮을 수 있습니다.
• Discover 이해하기는 추적하기 어렵기 때문에 생각보다 많은 트래픽이 손실될 수 있습니다. 야생에서 일부 신디케이션 문제를 발견할 수 있지만 단순히 그곳에 가서 신디케이션 문제를 쉽게 찾을 수는 없습니다(검색, 주요 뉴스, 뉴스 탭 및 Google 뉴스에서 할 수 있는 것처럼).
• Semrush 및 NewzDash와 같은 도구는 순위 추적 관점에서 차이를 메우는 데 도움이 될 수 있습니다. 그리고 NewzDash는 뉴스 게시자에 중점을 두므로 추적 무기고에서 유용한 도구가 될 수 있습니다. Semrush는 검색 및 Top Stories에 도움을 줄 수 있습니다. 다시 말하지만 콘텐츠 신디케이트로 인한 가시성 문제에 대해 확실한 느낌을 얻으십시오.

요약 – 뉴스 게시자의 신디케이션 문제는 생각보다 심각할 수 있습니다.
콘텐츠를 신디케이트하는 경우 SERP(및 Google 플랫폼 전체)에서 진행되는 상황을 이해하는 것이 좋습니다. 그런 다음 상황에 대처하기 위한 공격 계획을 세우십시오. 여기에는 사물을 그대로 유지하는 것이 포함될 수도 있고 신디케이션 전략에 변화를 가져올 수도 있습니다. 그러나 첫 번째 단계는 상황에 대한 가시성을 확보하는 것입니다. 행운을 빌어요.

GG