คู่มือการจัดทำดัชนีของ Google: ปัญหาการจัดทำดัชนีของ Google สถิติ และอื่นๆ

เนื้อหา SEO จำนวนมากมุ่งเน้นไปที่การจัดอันดับที่ดีในผลการค้นหาที่ต้องการ นั่นสมเหตุสมผลแล้วเพราะคุณไม่สามารถดึงดูดการเข้าชมไซต์ของคุณจากการค้นหาทั่วไปได้หากไม่ได้รับการจัดอันดับที่ดีในผลการค้นหา (เช่น ดัชนีของ Google) นอกจากนี้ คุณไม่สามารถเพิ่มโอกาสในการขายและยอดขายให้กับธุรกิจของคุณได้หากไม่เพิ่มการเข้าชมแบบออร์แกนิก หากคุณเป็นผู้บริหารฝ่ายการตลาด ผู้อำนวยการ ผู้จัดการ ฯลฯ สิ่งนี้น่าจะเป็นข้อกังวลหลักของคุณ

ในการจัดอันดับตามคำที่ต้องการ ก่อนอื่นคุณต้องมีสถานะในดัชนีของ Google กาลครั้งหนึ่งการทำให้ไซต์ของคุณเข้าสู่ดัชนีนั้นค่อนข้างยาก “การส่งไซต์” เป็นบริการทั่วไป อย่างไรก็ตาม ขณะนี้ Google เก่งมากในการค้นหาไซต์ใหม่ๆ ตัวอย่างเช่น หากคุณทวีตเกี่ยวกับไซต์ของคุณ ส่งข่าวประชาสัมพันธ์หรือใครก็ตามที่เชื่อมโยงกับไซต์ของคุณ Google ก็น่าจะรู้ว่าคุณมีตัวตนอยู่ แต่ถ้าคุณพยายามเพิ่มปริมาณการค้นหา คุณอาจพบปัญหาต่างๆ ของการจัดทำดัชนีของ Google เมื่อไซต์ของคุณเติบโตขึ้น

สำหรับผู้ที่ไม่ใช่ SEO (และบ่อยครั้งสำหรับ SEO ด้วย) ปัญหาเหล่านี้จำนวนมากยังคงสร้างความสับสนและน่าหงุดหงิดอยู่มาก แทบทุกครั้งที่ฉันดำเนินการตรวจสอบ SEO กับลูกค้า อย่างน้อยก็มีความสับสนเกี่ยวกับปัญหาการจัดทำดัชนี เนื้อหาที่ซ้ำกัน วิธีที่ดีที่สุดในการลบหน้าออกจากดัชนีของ Google ฯลฯ

สิ่งที่คาดหวังจากภาพรวมดัชนี Google นี้

ในบทความนี้ ผมจะพยายามช่วยนักการตลาดทั่วไป (ผู้ที่มีความเข้าใจพื้นฐานเกี่ยวกับ SEO ซึ่งมีหน้าที่รับผิดชอบในการเพิ่มการเข้าชมเว็บไซต์ของตน แต่อาจไม่เชี่ยวชาญในการรวบรวมข้อมูล Screaming Frog และการวิเคราะห์ลิงก์ในแต่ละวัน รายวัน) เข้าใจ:

• วิธีการทำงานของดัชนี Google
• ตีความสถิติดัชนีต่างๆ หรือ "จำนวน" จาก Google.com
• ทำความเข้าใจบัญชี Google Search Console ของคุณ
• การแก้ไขทางเทคนิคสำหรับปัญหาการจัดทำดัชนีทั่วไป (เช่น ไม่มีหน้าจัดทำดัชนีหรือมีหน้าที่คุณไม่ต้องการให้จัดทำดัชนีรั่วไหลเข้าไปในดัชนี)

เริ่มกันที่จุดเริ่มต้น

ดัชนี Google ทำงานอย่างไร

เครื่องมือค้นหาของ Google นั้นซับซ้อนมาก ข้อมูลเชิงลึกเกี่ยวกับวิธีที่ Google ค้นหา จัดเก็บ และจัดลำดับความสำคัญของหน้าเว็บนั้นอยู่นอกเหนือขอบเขตของบทความนี้

ในระดับสูง Google ทำงานหนักในการค้นหา (หรือรวบรวมข้อมูล) หน้าเว็บที่มีประโยชน์ให้ได้มากที่สุด นอกจากนี้ Google ยังทำงานอย่างหนักในการจัดเก็บ (หรือจัดทำดัชนี) หน้าเว็บที่แสดงการค้นหาที่เกี่ยวข้อง นอกจากนี้ ดัชนีของ Google ยังทำงานอย่างหนักเพื่อส่งคืนหน้าเว็บที่เหมาะสมซึ่งตอบสนองคำค้นหาของผู้ค้นหาได้ดีที่สุด (ผลข้างเคียงนี้น่าจะช่วยให้ Alphabet ได้รับประโยชน์เช่นกัน แต่นั่นเป็นการอภิปรายอื่น)

อีกครั้งในระดับสูง (และแบบง่ายเกินไป) ที่คุณต้องการ:

• สิ่งดีๆ ที่ได้รับการจัดทำดัชนี (หน้าเว็บในไซต์ของคุณมีคุณภาพสูง มีประโยชน์สำหรับผู้ค้นหา และมีแนวโน้มที่จะกระตุ้นการกระทำที่ต้องการสำหรับธุรกิจของคุณ)
• สิ่งที่ไม่ดีออกจากดัชนีของ Google (หน้าเว็บที่มีมูลค่าต่ำและ/หรือบางหรือซ้ำซึ่งสร้างความเจ็บปวดให้กับคุณมากกว่าช่วยคุณในการกระตุ้นการเข้าชมที่เกี่ยวข้องมายังไซต์ของคุณ)

สิ่งที่ควรทราบอีกประการหนึ่ง: การ จัดทำดัชนีไม่จำเป็นต้องเหมือนกับสิ่งที่ปรากฏในผลการค้นหา Google เก็บรักษาดัชนีของหน้าไว้ภายใน เมื่อคุณค้นหาหัวข้อต่างๆ ใน ​​Google.com คุณจะเห็นหน้าเว็บบางหน้าของคุณ นั่นไม่จำเป็นว่าหน้าเว็บทุกหน้า Google จะเก็บไว้ในดัชนี หน้าที่จัดทำดัชนีอาจไม่แสดงในผลการค้นหาหรือได้รับการคลิกและมาที่ไซต์ของคุณจริงๆ

ส่วนที่เหลือของบทความนี้มุ่งเน้นไปที่การวิเคราะห์ว่าหน้าใดจากไซต์ของคุณอยู่ในดัชนี เช่นเดียวกับสิ่งที่คุณ (ในฐานะนักการตลาด) สามารถทำได้เพื่อควบคุมและปรับปรุงสิ่งที่จัดทำดัชนีและไม่ได้จัดทำดัชนีให้ดียิ่งขึ้น นอกจากนี้ ยังมีทรัพยากรจำนวนมากสำหรับการเรียนรู้เพิ่มเติมเกี่ยวกับวิธีการทำงานของการจัดทำดัชนีของ Google รวมถึง:

• บทแนะนำของ Moz เกี่ยวกับวิธีการทำงานของเสิร์ชเอ็นจิ้น
• รายละเอียดต่างๆ ของงานนำเสนอของ Google Search Engineer เกี่ยวกับวิธีการทำงานของดัชนี Google
• ภาพนี้แสดงถึงวิธีการทำงานของ Google

ทำความเข้าใจเกี่ยวกับสถิติดัชนี

สำหรับหลาย ๆ คน สถิติดัชนีที่คุณเห็นเกี่ยวกับไซต์ของคุณทำให้เกิดความคิดที่ค่อนข้างสับสน Google เสนอวิธีทั่วไปสองวิธีในการแสดงสถิติไซต์ของคุณเกี่ยวกับจำนวนหน้าในไซต์ของคุณที่ Google จัดทำดัชนี

ดัชนีสถิติบน Google.com

หากต้องการดูจำนวนและหน้าใดบ้างที่ได้รับการจัดทำดัชนีใน Google ให้เริ่มโดยไปที่ Google.com แล้วพิมพ์ site:yoursite.com มาดูสิ่งที่ Google แสดงในโอเปอเรเตอร์การค้นหาไซต์สำหรับไซต์หนึ่งๆ ที่เราเคยเขียนเกี่ยวกับ SearchEngineLand.com:

ผลลัพธ์ประมาณ 30,700 รายการ – ค่อนข้างน้อย! หากนี่คือไซต์ของคุณและคุณได้ตรวจสอบสถิติดัชนีของคุณเป็นครั้งแรก คุณน่าจะมีสองอารมณ์ อย่างแรก ตื่นเต้นเพราะคุณคิดว่าโพสต์ของฉันจำนวนมากกำลังถูกจัดทำดัชนี! ในทางกลับกัน คุณอาจรู้สึกตื่นตระหนกเมื่อคิดว่าไซต์ของคุณมีหน้าเว็บไม่มากนัก

เมื่อคุณเริ่มสำรวจหน้าเว็บที่มีการจัดทำดัชนีและคลิกผ่านไปยังหน้าเพิ่มเติมของผลลัพธ์ (สิบ – หรือน้อยกว่านั้นมากโดยมีโฆษณาและเนื้อหาเด่นอื่นๆ ของ Google ที่ครอบครอง SERPs จำนวนมาก – เป็นค่าเริ่มต้นของหลักสูตร แต่เนื่องจากฉันมักจะ ขุดผ่าน SERPs ฉันต้องการเปลี่ยนผลลัพธ์ต่อหน้าเป็น 100) มีบางสิ่งที่ค่อนข้างแปลกเกิดขึ้น ด้วยการตั้งค่าของฉันที่ 100 ผลลัพธ์ต่อหน้า เมื่อฉันเลื่อนไปที่ด้านล่างของผลการค้นหาสำหรับการค้นหาไซต์ของ SEL ฉันเห็น 8 ลิงก์:

ผลลัพธ์ 8 x 100 ไม่เท่ากับ “ประมาณ 30,700” อย่างชัดเจน แปลก: ฉันคิดว่า Google ให้ผลลัพธ์มากกว่า 30,000 รายการ หากฉันคลิกลิงก์ไปยัง ^{หน้าที่} 8 ของผลการค้นหา จะทำให้เกิดความสับสนมากยิ่งขึ้น:

และถ้าฉันคลิกลิงก์ "ค้นหาซ้ำโดยรวมผลลัพธ์ที่ละเว้น" และคลิกย้อนกลับไปยังหน้าสุดท้าย ฉันเห็นสิ่งที่คล้ายกัน

แต่ Search Engine Land เป็นไซต์ที่น่าเชื่อถืออย่างยิ่งซึ่งโพสต์เนื้อหาใหม่หลายชิ้นต่อวัน นั่นไม่ใช่หน้าเว็บทั้งหมดที่ Google จัดทำดัชนีใช่ไหม

มันไม่แน่นอน จริง ๆ แล้ว Google ได้เห็นการทดสอบการทิ้งสิ่งนี้ไปพร้อมกัน นอกจากนี้ Google ยังกล่าวอย่างชัดเจนว่าตัวเลขเหล่านี้ไม่น่าเชื่อถืออย่างสมบูรณ์เป็นเวลาหลายปี (วิดีโอนั้นมาจากปี 2010!) และปัญหานี้ยิ่งแย่ลงไปอีกเมื่อไซต์ของคุณใหญ่ขึ้น:

DYK "จำนวนผลลัพธ์" ที่คุณเห็นในผลการค้นหาเป็นเพียงค่าประมาณที่แม่นยำน้อยกว่าหากมีผลลัพธ์ที่เป็นไปได้มากกว่า pic.twitter.com/o2odhwjsIA

— Gary Illyes ᕕ( ᐛ )ᕗ (@methode) วันที่ 11 กุมภาพันธ์ 2017

เราจะหาจำนวนการจัดทำดัชนีได้จากที่ใดอีก หรือเราจะเข้าใจได้อย่างไรว่าหน้าใดในไซต์ของเรามีการจัดทำดัชนี

ดัชนีสถิติใน Google Search Console (เดิมคือ Webmaster Tools)

บัญชี Google Search Console ของคุณให้ข้อมูลเพิ่มเติมเกี่ยวกับผลลัพธ์ดัชนีไซต์ของคุณ และหากคุณไม่มีบัญชี GSC ให้ตั้งค่าที่นี่วันนี้

สำหรับภาพรวมของเรา ให้ดูที่บัญชีสำหรับไซต์ที่บริษัทของฉันเป็นเจ้าของ Google Search Console มีส่วนย่อยทั้งหมดสำหรับข้อมูลดัชนีของ Google โดยเฉพาะ

สถานะดัชนีใน Google Search Console

ข้อมูล GSC โดยทั่วไปให้ข้อมูลที่แม่นยำกว่า นอกจากนี้ยังมีข้อมูลแนวโน้มอีกด้วย แต่ถ้าคุณเห็นหน้าที่จัดทำดัชนีจำนวนหนึ่งซึ่งดูต่ำเกินไปล่ะ หรือสถิติการวิเคราะห์การค้นหาที่ต่ำกว่ารายงานอย่างมาก?

โดยทั่วไป ปัญหาเหล่านี้เกิดขึ้นตามวิธีที่ Google Search Console จัดการกับโดเมนย่อย ไซต์เวอร์ชัน www และไม่ใช่ www และเวอร์ชัน http และ https ของไซต์ของคุณ

หากหมายเลข Google Search Console ของคุณต่ำมาก ให้ตรวจสอบ URL เฉพาะที่เกี่ยวข้องกับไซต์ในการนำทางด้านบน:

นอกจากนี้ หากคุณย้ายไซต์ของคุณไปที่ https หรือใช้โดเมนย่อย (เช่น http://info.measuredsem.com) ให้เพิ่มไซต์เหล่านั้นเป็นไซต์แยกต่างหาก นอกจากนี้ หากคุณเปลี่ยนจาก http://www.measuredsem.com เป็น http://measuredsem.com หรือสนับสนุนทั้งสองอย่าง ให้ตั้งค่าโดเมนที่คุณต้องการภายในบัญชีของคุณ

นอกจากนี้ยังมีอีกที่หนึ่งที่คุณสามารถรับข้อมูลเกี่ยวกับการจัดทำดัชนีไซต์ของคุณภายใน Google Search Console

แผนผังเว็บไซต์ใน Google Search Console

Google Search Console มีส่วนแผนผังเว็บไซต์ ซึ่งเปิดใช้งานการส่งแผนผังเว็บไซต์ XML สำหรับเว็บไซต์ของคุณ นอกจากนี้ ส่วนนี้จะแสดงจำนวนหน้าที่ส่งมาจริงในดัชนี นอกจากนี้ ส่วนนี้ยังแสดงให้เห็นว่าตัวเลขนั้นเปลี่ยนแปลงไปอย่างไรเมื่อเวลาผ่านไป

ความท้าทายในที่นี้คือ แม้ว่าคุณสามารถดูภายในแผนผังไซต์ XML เพื่อดูว่าหน้าใดที่คุณส่งเข้ามา แต่คุณไม่จำเป็นต้องมีรายละเอียดในระดับที่คุณอาจต้องการตอบคำถามเฉพาะเจาะจง (เช่น มีหน้าจำนวนมากหรือไม่' จัดทำดัชนีไว้)

5 เคล็ดลับการจัดทำดัชนีของ Google ที่นำไปปฏิบัติได้

ตอนนี้คุณทราบเพิ่มเติมเล็กน้อยเกี่ยวกับวิธีการทำงานของดัชนีของ Google นอกจากนี้ เครื่องมือบางอย่างที่คุณใช้แสดงประสิทธิภาพของไซต์ของคุณภายในดัชนีของ Google แล้วการแก้ปัญหาเฉพาะที่เกี่ยวข้องกับดัชนีล่ะ? จากการทำงานกับลูกค้าและการวิจัยเกี่ยวกับหัวข้อนี้ ต่อไปนี้คือคำถาม/ประเด็นที่ใหญ่ที่สุด 5 ข้อที่ฉันพบเกี่ยวกับการจัดทำดัชนีของ Google:

1. จะบอกได้อย่างไรว่าหน้าใดไม่ได้รับการจัดทำดัชนี

หน้าเว็บที่ไม่อยู่ในดัชนีของ Google จะไม่ปรากฏในผลการค้นหา สิ่งแรกที่คุณอาจต้องการทราบคือ "หน้าใดในไซต์ของฉันที่ไม่ได้รับการจัดทำดัชนี" น่าเสียดายที่วิธีการส่วนใหญ่ที่ระบุไว้ข้างต้นไม่มีวิธีแก้ไขปัญหานี้ วิธีการก่อนหน้านี้ช่วยให้เข้าใจหน้าเว็บในไซต์ของคุณ ในดัชนีของ Google อย่างไรก็ตาม วิธีการเหล่านั้นไม่ได้ระบุหน้าเว็บในไซต์ของคุณที่ ไม่ได้อยู่ในดัชนีของ Google สำหรับไซต์ขนาดเล็กมาก อาจมองเห็นได้ง่าย แต่ถ้าคุณมีบล็อกที่ใช้งานอยู่ ไซต์ของคุณน่าจะมีหน้าเว็บเพียงพอ ซึ่งหน้าที่ขาดหายไปแบบ “หลบตา” ไม่ใช่ตัวเลือกที่สมเหตุสมผล เครื่องมือหลักสองอย่างช่วยแก้ปัญหากระบวนการนี้:

ขั้นตอนที่หนึ่ง: รวบรวมข้อมูลไซต์ของคุณด้วย Screaming Frog

Screaming Frog เป็นหนึ่งในแอปที่ฉันใช้บ่อยที่สุดผ่านกระบวนการตรวจสอบเว็บไซต์ SEO ในภาพหน้าจอนี้จะแสดงรูปภาพของหน้าต่างๆ ที่มี อยู่ในไซต์ของคุณ:

Screaming Frog เป็นเครื่องมือ SEO ที่มีประโยชน์และทรงพลังอย่างยิ่ง แต่สำหรับจุดประสงค์ของเราที่นี่ เราเพียงต้องการรวบรวมข้อมูลเว็บไซต์และกรองหน้า HTML จากนั้น กรองรายการนั้นสำหรับหน้าใดๆ บนไซต์ของเราที่เรา ต้องการให้ อยู่ในดัชนี เราจะจัดการกับหน้าที่เราไม่ต้องการในอีกสักครู่

จากนั้น ฉันจะใช้เครื่องมืออื่นที่เป็นประโยชน์อย่างเหลือเชื่อในการตรวจสอบ SEO ทางเทคนิค: เครื่องมือสร้างโปรไฟล์ URL

URL Profiler เป็นเครื่องมือ SEO ที่ทรงพลังมากอีกตัวหนึ่ง แต่ในที่นี้เราจะใช้มันเพื่อจุดประสงค์ที่ค่อนข้างแคบ การค้นหาว่า URL ใดในไซต์ของเรา (ซึ่งเราเพิ่งส่งออกจากการรวบรวมข้อมูลของเรา) ได้รับการจัดทำดัชนีจริง:

หากคุณมีไซต์ขนาดใหญ่ โดยทั่วไปจะต้องมีผู้รับมอบฉันทะเพื่อตรวจสอบการจัดทำดัชนี หากคุณไม่เก่งเรื่องเทคนิคมากเกินไป อาจฟังดูน่ากลัว แต่ก็ง่ายอย่างเหลือเชื่อ ใช้เวลาไม่กี่นาทีและไม่ต้องใช้ความเชี่ยวชาญทางเทคนิคใดๆ (นอกเหนือจากทักษะการคัดลอก/วาง)

ในบางครั้ง อาจใช้เวลาสองถึงสามครั้งและเว้นระยะไว้เสมอสำหรับการรวบรวมข้อมูลที่ใหญ่ขึ้น แต่สุดท้ายแล้วคุณจะพบรายชื่อหน้าเว็บทั้งหมดที่ ไม่ได้จัดทำดัชนี ในไซต์ของคุณ

2. วิธีทำให้บางสิ่ง (ทั้งไซต์ของคุณ หน้าใหม่ หน้าที่มีอยู่ซึ่งไม่ได้จัดทำดัชนี) ได้รับการจัดทำดัชนี

การจัดทำดัชนีไซต์ใหม่เคยเป็นอุตสาหกรรมสำหรับตัวมันเอง อย่างไรก็ตาม ทุกวันนี้ หากคุณเป็นเจ้าของเว็บไซต์และธุรกิจที่ถูกกฎหมาย กระบวนการนี้จะได้รับการปรับปรุงให้ดีขึ้น อันที่จริง หน้าแรกและโดเมนโดยรวมของคุณควรได้รับการจัดทำดัชนีอย่างรวดเร็ว ตัวอย่างเช่น การส่งทวีตพร้อมลิงก์ช่วยให้ Google จัดทำดัชนีไซต์ หรือรับลิงค์จากเว็บไซต์อื่นก็ได้ สุดท้าย เพียงส่ง URL ของคุณไปที่ Google เพื่อรับผลงานฟรี! ด้วยเหตุนี้ เว็บไซต์จำนวนมากที่ไม่มีเนื้อหาและไม่มีลิงก์ภายนอก / ทวีต / ฯลฯ ได้รับการจัดทำดัชนีโดยไม่ต้องใช้ความพยายามใดๆ เมื่อเร็ว ๆ นี้ บริษัทของฉันซื้อโดเมน 50 โดเมนและวางหน้าตัวยึดตำแหน่งที่เรียบง่ายในแต่ละโดเมน Google จัดทำดัชนีไว้ 28 รายการก่อนที่เราจะทำการโปรโมตใดๆ เลย

สำหรับไซต์ที่มีอยู่ซึ่งมีชุดของหน้าเว็บที่ต้องการการจัดทำดัชนี โปรดดูตัวเลือกของคุณ

A. ดึงข้อมูลและส่งไปยังดัชนีผ่าน Google Search Console

สำหรับไซต์ที่มี URL จำนวนน้อย ให้ส่งแต่ละรายการไปยัง Google Console เพื่อทำดัชนี นี่เป็นกระบวนการที่ค่อนข้างง่าย เริ่มต้นด้วยการลงชื่อเข้าใช้บัญชี Google Search Console และดูการนำทางด้านซ้ายภายใต้การรวบรวมข้อมูล แล้วคลิกดึงข้อมูลเหมือนเป็น Google:

ถัดไป คุณป้อน URL ที่ต้องการส่งและคลิกดึงข้อมูล คุณจะได้รับตัวเลือกในการร้องขอการจัดทำดัชนี:

สุดท้าย คุณส่ง URL เองหรือ URL และ URL ที่ลิงก์มาจากหน้า เพื่อวัตถุประสงค์ของเรา เนื่องจากเรามีชุดของ URL ที่เฉพาะเจาะจง เราจึงต้องการให้มีการจัดทำดัชนี (และเนื่องจากเรามีจำนวนการส่งที่จำกัด – URL เดียว 500 รายการ และการส่งหลาย URL เพียง 10 รายการ – ต่อเดือน) เราจะส่ง URL นั้นไปที่ ดัชนี:

สุดท้าย คุณจะเห็นว่าการร้องขอการจัดทำดัชนีของคุณผ่าน:

หากคุณกำลังดำเนินการผ่านรายการ URL คุณสามารถให้เวลาสองสามวันและเรียกใช้รายการเดียวกันผ่านตัวสร้างโปรไฟล์ URL อีกครั้ง และดูว่าความพยายามของคุณส่งผลต่อการจัดทำดัชนีอย่างไร

B. แบ่งปัน URL ของคุณสู่สังคม

การแชร์ URL และเนื้อหาของคุณผ่านโซเชียลเน็ตเวิร์กยังช่วยปรับปรุงการจัดทำดัชนีของหน้าสำคัญอีกด้วย ตัวอย่างเช่น สำหรับเพจที่มีคุณค่า (และเกี่ยวข้องกับผู้ชมหลักของคุณ) ให้แชร์บนโซเชียล โดยเฉพาะอย่างยิ่ง วิธีนี้ใช้ได้กับไซต์ที่มีบัญชีโซเชียลยอดนิยม

ตัวอย่างเช่น ไซต์ของคุณมีหน้าผลิตภัณฑ์จำนวนมากที่แสดงรายละเอียดคุณลักษณะเฉพาะหรือไม่ ถ้าใช่ ให้จัดคิว 1 ทวีตต่อสัปดาห์ / ทุก ๆ สองสามวันเพื่อแบ่งปันหน้าคุณสมบัติเฉพาะ บางอย่างเช่น "คุณรู้หรือไม่ว่า {product} สามารถช่วยในเรื่อง {thing feature help with} ได้ {link}” ทำงานได้ดี

C. แก้ไขปัญหาพื้นฐาน!

ไซต์ของคุณยังมีหน้าเว็บจำนวนมากที่ต้องจัดทำดัชนีหรือไม่ ถ้าเป็นเช่นนั้น แสดงว่าน่าจะมีปัญหาพื้นฐานด้าน SEO กับไซต์ของคุณ คุณจะต้องการตรวจสอบ:

• Link Equity – คุณมีหน้าบนไซต์ของคุณมากกว่าที่ส่วนลิงค์ (จำนวนและอำนาจของลิงค์ที่ชี้ไปยังไซต์ของคุณ) รองรับได้หรือไม่ ซึ่งอาจหมายความว่าหน้าที่ลึกลงไปจะไม่ได้รับการรวบรวมข้อมูลและจัดทำดัชนีจนกว่าคุณจะพบวิธีสร้างลิงก์ไปยังโดเมนของคุณ (และอาจพบวิธีรับลิงก์และการแชร์สำหรับหน้าที่ลึกกว่านั้น)
• สถาปัตยกรรมไซต์ – สถาปัตยกรรมข้อมูลของไซต์ของคุณเป็นหัวข้อที่อยู่นอกเหนือขอบเขตของบทความนี้ แต่คุณอาจมีหน้าเว็บที่มีการคลิกหลายครั้งจากหน้าแรกของไซต์ของคุณ ส่งผลให้เครื่องมือค้นหาเหล่านี้เข้าถึงได้ยาก นี่เป็นสิ่งที่ต้องตรวจสอบอีกครั้ง (และ/หรืออาจจ้าง SEO ที่มีประสบการณ์เพื่อตรวจสอบ)
• แผนผังไซต์ – สุดท้าย หากคุณยังไม่ได้ส่งแผนผังไซต์ XML แบบไดนามิกไปยัง Google Search Console ขั้นตอนนี้จะช่วยให้การจัดทำดัชนีไซต์ของคุณดีขึ้น

3. วิธีเก็บเพจที่คุณไม่ต้องการให้จัดทำดัชนีออกจากดัชนี

ปัญหาทั่วไปอีกประการหนึ่งสำหรับนักการตลาดคือคุณต้องการกันหน้าใดหน้าหนึ่งออกจากดัชนีของ Google อาจเป็นเพจที่ซ้ำกับเพจที่มีอยู่ เพจบางมากที่ผู้ใช้บางคนใช้แต่ไม่เหมาะสำหรับผู้ค้นหา หรืออาจเป็นเพจที่มีข้อมูลส่วนตัวที่คุณไม่ต้องการให้อยู่ในดัชนีของ Google

ไม่ว่าจะด้วยเหตุผลใดก็ตาม มีวิธีการหลักๆ สองสามวิธีในการกันเนื้อหาออกจากดัชนีของ Google

1. แท็กดัชนี Meta No

ในหลายกรณี วิธีที่ต้องการในการกันหน้าออกจากดัชนีของ Google คือการเพิ่มแท็ก Meta No Index จากเอกสารของ Google ในหัวข้อ:

แท็กไม่มีดัชนีเสนอวิธีแก้ปัญหาที่ยอดเยี่ยม มันสั่งให้ Google ลบหน้าออก จากดัชนี ตัวอย่างเช่น ไซต์ที่มีเนื้อหา จัดทำดัชนีแล้ว แท็กไม่มีดัชนีจะเสนอวิธีที่ต้องการในการจัดทำดัชนีเนื้อหาของคุณ โรบ็อตไม่อนุญาตคำสั่งทำให้ Google รวบรวมข้อมูลหน้าเว็บไม่ได้ แต่จะไม่จำเป็นต้องลบออกจากดัชนีหากมีอยู่แล้ว

ตรงกันข้ามกับที่ Gary Illyes วิศวกรของ Google ชี้ให้เห็น:

DYK บล็อกหน้าที่มีทั้งไม่อนุญาต robots.txt & noindex ในหน้านั้นไม่สมเหตุสมผลเลยเพราะ Googlebot ไม่สามารถ "เห็น" noindex ได้หรือไม่ pic.twitter.com/N4639rCCWt

— Gary Illyes ᕕ( ᐛ )ᕗ (@methode) วันที่ 10 กุมภาพันธ์ 2017

Google ต้องสามารถรวบรวมข้อมูลหน้าเว็บของคุณเพื่อลบออกจากดัชนีด้วยวิธีนี้ ดังนั้น ตรวจสอบให้แน่ใจว่าหน้าเว็บยังคงสามารถเข้าถึงได้ รอจนกว่าจะมีการรวบรวมข้อมูล (หรือโปรแกรมดึงข้อมูลเหมือนเป็น Google เพื่อขอให้รวบรวมข้อมูล/พิจารณาใหม่)

2. Robots.txt ไม่อนุญาต

สำหรับไซต์ใหม่ (หรือส่วนของไซต์) ที่รอการจัดทำดัชนี ให้ใช้คำสั่งไม่อนุญาตของโรบ็อต ตัวอย่างเช่น ไซต์ที่กำลังจัดเตรียม หรือโดเมนย่อยที่อยู่ระหว่างการปรับปรุงและไม่พร้อมสำหรับช่วงไพรม์ไทม์อาจต้องการตัวเลือกนี้

การเพิ่มคำสั่งนี้อีกครั้งไม่จำเป็นต้องทำให้เนื้อหาของคุณถูกลบออกจากดัชนีหากเนื้อหานั้นปรากฏอยู่แล้ว ในความเป็นจริง มันสามารถนำไปสู่ผลลัพธ์ที่มีการจัดทำดัชนีและมีคำอธิบายที่ไม่เหมาะสม

คำเตือนที่สำคัญเกี่ยวกับการใช้ disallow คือต้องแน่ใจว่าไม่ได้ disallow มากกว่าที่คุณตั้งใจไว้ ระวังอย่าปิดกั้นส่วนย่อยของไซต์ของคุณ ซึ่งอาจมีเนื้อหาที่มีคุณค่าซึ่งคุณต้องการให้ผู้ค้นหาสามารถเข้าถึงได้ และทดสอบการเปลี่ยนแปลงภายในไฟล์โรบ็อตของคุณใน Google Search Console ด้วยเครื่องมือทดสอบโรบ็อต

การลบ URL และการยกเว้นพารามิเตอร์ URL ผ่าน Search Console

สุดท้าย หากคุณมีพารามิเตอร์ที่เพิ่มเข้ามาโดยระบบจัดการเนื้อหาของไซต์ของคุณ (อาจเป็นเพราะผลการค้นหาที่กรอง การแบ่งหน้า หรือคล้ายกัน) ที่กำลังถูกจัดทำดัชนีซึ่งคุณต้องการนำออก คุณสามารถให้ข้อมูลเพิ่มเติมแก่ Google เกี่ยวกับพารามิเตอร์เหล่านั้นได้ หรือขอให้ลบ URL ที่ต้องการโดยลบ URL ชั่วคราวออกจากผลการค้นหา (ไม่จำเป็นต้องมาจากดัชนีของ Google และไม่จำเป็นต้องถาวร):

นอกจากนี้ ยังมีวิธีการที่สะดวกสำหรับการลบ URL จำนวนมากออกจากผลการค้นหาหรือระบุพารามิเตอร์เฉพาะ:

จากนั้นให้ข้อมูลเพิ่มเติมแก่ Google เกี่ยวกับเรื่องนี้:

John Mueller ของ Google กล่าวว่าการทำงานนี้คล้ายกับเนื้อหาที่ไม่มีการจัดทำดัชนี "อย่างถาวร" ดังนั้นสิ่งนี้จึงเสนอตัวเลือกที่ใช้งานได้สำหรับ URL แบบครั้งเดียว ตามหลักการแล้ว ในกรณีส่วนใหญ่ แทนที่จะใช้ประโยชน์จากการลบชั่วคราว คุณจะต้องเจาะลึกและแก้ไขปัญหาหลัก อะไรเกี่ยวกับโครงสร้างทางเทคนิคของไซต์ของคุณที่ทำให้หน้าเว็บต้องถูกยกเลิกการจัดทำดัชนี ทำไมคุณ (หรือคุณ) เป็น "ดัชนีบวม" ตั้งแต่แรก?

4. “Index Bloat” คืออะไร และฉันจะแก้ไขได้อย่างไร?

การขยายตัวของดัชนีมีผลเมื่อคุณมีหน้าเว็บที่ไม่จำเป็นซึ่งจัดทำดัชนีโดย Google ซึ่งไม่น่าจะนำการเข้าชมที่เกี่ยวข้องมายังไซต์ของคุณเพื่อตอบสนองต่อคำถามของผู้ใช้ สิ่งนี้สร้างปัญหาเนื่องจากบังคับให้เครื่องมือค้นหาใช้เวลาในการรวบรวมข้อมูลและจัดทำดัชนีหน้าเว็บที่มีมูลค่าต่ำ (ซึ่งอาจใช้ "งบประมาณการรวบรวมข้อมูล" ของคุณ) นอกจากนี้ อาจแสดงหน้าเว็บที่มีมูลค่าต่ำในผลการค้นหาบางรายการ (นำไปสู่ประสบการณ์ของผู้ใช้ที่ไม่ดีและเมตริกการมีส่วนร่วมที่ไม่ดี) การมีเนื้อหาบางส่วนหรือซ้ำซ้อนจำนวนมากซึ่งมีเมตริกการมีส่วนร่วมที่แย่ อาจทำให้การจัดอันดับคุณภาพต่ำในสายตาของ Google

นอกจากการใช้เครื่องมือและกระบวนการข้างต้นเพื่อวิเคราะห์ว่าหน้าใดอยู่ในดัชนีแล้ว ใช้เครื่องมือและกระบวนการต่างๆ มากขึ้นเพื่อลบหน้าคุณภาพต่ำและมูลค่าต่ำออกจากดัชนีแล้ว ต่อไปนี้เป็นแหล่งข้อมูลที่ดีสองประการในหัวข้อนี้:

• คู่มือ Green Lane SEO เพื่อค้นหาและแก้ไขปัญหาการขยายตัวของดัชนี
• การวินิจฉัยดัชนีที่รวดเร็วและสกปรกของ Portent Interactive

อีกครั้ง สิ่งสำคัญที่ควรทราบคืออย่า "ตัดลึกเกินไป" ก่อนที่คุณจะเริ่มเจาะข้อมูลส่วนใหญ่ในไซต์ของคุณจากดัชนีของ Google ให้ดูใน Analytics (หรือคว้า URL และเรียกใช้ผ่านเครื่องมือสร้างโปรไฟล์ URL) เพื่อให้แน่ใจว่าคุณไม่ได้ตัดการเข้าชมและโอกาสในการขาย / การขายจากหน้าเหล่านี้

5. เครื่องมือใดที่สามารถช่วยในการตรวจสอบการจัดทำดัชนี (เช่น "ตัวตรวจสอบดัชนีของ Google ที่ดีที่สุดคืออะไร")

ตามที่ฉันได้กล่าวถึง ad nauseum ที่นี่ ความชอบส่วนตัวของฉันคือการใช้ประโยชน์จาก URL Profiler เป็นตัวตรวจสอบดัชนีของ Google แต่นี่คือตัวเลือกเพิ่มเติมบางอย่าง:

• http://indexchecking.com/
• https://northcutt.com/tools/free-seo-tools/google-indexed-pages-checker/
• https://www.greenlaneseo.com/blog/google-indexation-tester/

โบนัส: ทรัพยากรการจัดทำดัชนีบนมือถือ

การจัดทำดัชนีมือถือและแอปโดยเฉพาะอาจแตกต่างจากการจัดทำดัชนีแบบดั้งเดิมเล็กน้อย ดังนั้นหากคุณประสบปัญหา ต่อไปนี้เป็นแหล่งข้อมูลการจัดทำดัชนีที่เน้นอุปกรณ์เคลื่อนที่เพิ่มเติม:

• https://www.apptentive.com/blog/2015/12/15/app-indexing-how-to-index-your-app-on-google/
• https://www.bruceclay.com/blog/apps-101-what-is-deep-linking-and-app-indexing-setup/
• https://www.slideshare.net/justinrbriggs/how-to-setup-app-indexation
• http://searchengineland.com/5-tips-for-optimal-mobile-site-indexing-107088
• https://www.deepcrawl.com/blog/best-practice/app-deep-linking-for-beginners-google-app-indexing-facebook-app-links/
• https://moz.com/blog/how-to-get-your-app-content-indexed-by-google

เราพลาดอะไรไป? คุณพบปัญหาอื่นๆ ในการจัดทำดัชนีของ Google ใดบ้าง / คุณสามารถแบ่งปันเคล็ดลับอะไรได้บ้าง