วิธีเพิ่มไฟล์ Robots.txt แบบกำหนดเองใน Blogger

ในโพสต์ก่อนหน้านี้ของฉันฉันได้พูดถึงการตั้งค่าแท็กส่วนหัวของหุ่นยนต์ที่กำหนดเองสำหรับบล็อกเกอร์

หากคุณได้อ่านโพสต์นั้นฉันหวังว่าพวกคุณจะตระหนักถึงความสำคัญของการจัดอันดับการค้นหา

วันนี้ฉันกลับมาพร้อมกับคำศัพท์ที่มีประโยชน์และต้องระวังนั่นคือ Robots.txt

ในบล็อกเกอร์เรียกว่า Custom Robots.txt ซึ่งหมายความว่าตอนนี้คุณสามารถปรับแต่งไฟล์นี้ได้ตามที่คุณต้องการ

ในบทช่วยสอนของวันนี้เราจะพูดถึงคำศัพท์นี้แบบเจาะลึกและเรียนรู้เกี่ยวกับการใช้งานและประโยชน์ของมัน ฉันจะบอกวิธีเพิ่มไฟล์ robots.txt ที่กำหนดเองในบล็อกเกอร์

มาเริ่มคู่มือกันเลย

มากกว่า…

Robots.txt คืออะไร?

robots.txt เป็นแฟ้มข้อความที่มีไม่กี่บรรทัดของรหัสที่ง่าย

บันทึกไว้บนเว็บไซต์หรือเซิร์ฟเวอร์ของบล็อกซึ่งจะแนะนำโปรแกรมรวบรวมข้อมูลเว็บเกี่ยวกับวิธีการจัดทำดัชนีและรวบรวมข้อมูลบล็อกของคุณในผลการค้นหา

นั่นหมายความว่าคุณสามารถ จำกัด หน้าเว็บในบล็อกของคุณจากโปรแกรมรวบรวมข้อมูลเว็บเพื่อไม่ให้ถูกจัดทำดัชนีในเครื่องมือค้นหาเช่นหน้าป้ายกำกับบล็อกของคุณหน้าสาธิตหรือหน้าอื่น ๆ ที่ไม่สำคัญเท่ากับการจัดทำดัชนี

โปรดจำไว้เสมอว่าโปรแกรมรวบรวมข้อมูลการค้นหาจะสแกนไฟล์ robots.txt ก่อนที่จะรวบรวมข้อมูลหน้าเว็บใด ๆ

แต่ละบล็อกที่โฮสต์บนบล็อกเกอร์จะมีไฟล์ robots.txt เริ่มต้นซึ่งมีลักษณะดังนี้:

User-agent: Mediapartners-Google

ไม่อนุญาต:

ตัวแทนผู้ใช้: *

Disallow: / ค้นหา

อนุญาต: /

แผนผังเว็บไซต์: http://example.blogspot.com/feeds/posts/default?orderby=UPDATED

คำอธิบาย

รหัสนี้แบ่งออกเป็นสามส่วน ก่อนอื่นเรามาศึกษาแต่ละไฟล์หลังจากนั้นเราจะเรียนรู้วิธีเพิ่มไฟล์ robots.txt ที่กำหนดเองในบล็อกของบล็อกสปอต

User-agent: Mediapartners-Google

รหัสนี้ใช้สำหรับหุ่นยนต์ Google Adsense ซึ่งช่วยให้พวกเขาแสดงโฆษณาได้ดีขึ้นบนบล็อกของคุณ ไม่ว่าคุณจะใช้ Google Adsense ในบล็อกของคุณหรือไม่ก็ปล่อยไว้อย่างนั้น

ตัวแทนผู้ใช้: *

สำหรับหุ่นยนต์ทุกตัวที่มีเครื่องหมายดอกจัน (*) ในการตั้งค่าเริ่มต้นลิงก์ป้ายกำกับของบล็อกของเราถูก จำกัด ให้จัดทำดัชนีโดยโปรแกรมรวบรวมข้อมูลการค้นหาซึ่งหมายความว่าโปรแกรมรวบรวมข้อมูลเว็บจะไม่จัดทำดัชนีลิงก์หน้าป้ายกำกับของเราเนื่องจากโค้ดด้านล่าง

Disallow: / ค้นหา

นั่นหมายความว่าลิงก์ที่มีการ ค้นหา คำหลักหลังจากชื่อโดเมนจะถูกละเว้น ดูตัวอย่างด้านล่างซึ่งเป็นลิงค์ของหน้าป้ายชื่อ SEO

http://www.bloggertipstricks.com/ ค้นหา / label / SEO

และหากเราลบ Disallow: / search จากโค้ดด้านบนโปรแกรมรวบรวมข้อมูลจะเข้าถึงบล็อกทั้งหมดของเราเพื่อจัดทำดัชนีและรวบรวมข้อมูลเนื้อหาและหน้าเว็บทั้งหมด

ที่นี่ อนุญาต: / หมายถึงหน้าแรกที่หมายความว่าโปรแกรมรวบรวมข้อมูลเว็บสามารถรวบรวมข้อมูลและจัดทำดัชนีหน้าแรกของบล็อกของเรา

ไม่อนุญาตให้โพสต์เฉพาะ

ตอนนี้สมมติว่าหากเราต้องการแยกโพสต์ใดโพสต์หนึ่งจากการจัดทำดัชนีเราสามารถเพิ่มบรรทัดด้านล่างในโค้ดได้

Disallow: /yyyy/mm/post-url.html

ในที่นี้ yyyy และ mm หมายถึงปีที่เผยแพร่และเดือนที่โพสต์ตามลำดับ ตัวอย่างเช่นหากเราเผยแพร่โพสต์ในปี 2013 ในเดือนมีนาคมเราจะต้องใช้รูปแบบด้านล่าง

Disallow: /2013/03/post-url.html

เพื่อให้งานนี้ง่ายขึ้นคุณสามารถคัดลอก URL ของโพสต์และลบชื่อบล็อกตั้งแต่เริ่มต้น

ไม่อนุญาตหน้าเฉพาะ

หากเราจำเป็นต้องไม่อนุญาตหน้าใดหน้าหนึ่งเราสามารถใช้วิธีการเดียวกันกับด้านบน เพียงคัดลอก URL ของหน้าและลบที่อยู่บล็อกออกซึ่งจะมีลักษณะดังนี้:

Disallow: /p/page-url.html

แผนผังเว็บไซต์: http://example.blogspot.com/feeds/posts/default?orderby=UPDATED

รหัสนี้อ้างอิงถึงแผนผังเว็บไซต์ของบล็อกของเรา การเพิ่มลิงก์แผนผังเว็บไซต์ที่นี่เราเพียงแค่เพิ่มประสิทธิภาพอัตราการรวบรวมข้อมูลของบล็อก

หมายความว่าเมื่อใดก็ตามที่โปรแกรมรวบรวมข้อมูลเว็บสแกนไฟล์ robots.txt ของเราพวกเขาจะพบเส้นทางไปยังแผนผังเว็บไซต์ของเราซึ่งมีลิงก์ทั้งหมดของโพสต์ที่เราเผยแพร่อยู่

โปรแกรมรวบรวมข้อมูลเว็บจะพบว่าการรวบรวมข้อมูลโพสต์ทั้งหมดของเราเป็นเรื่องง่าย

ดังนั้นจึงมีโอกาสที่ดีกว่าที่โปรแกรมรวบรวมข้อมูลเว็บจะรวบรวมข้อมูลบล็อกโพสต์ทั้งหมดของเราโดยไม่สนใจโพสต์เดียว

หมายเหตุ : แผนผังเว็บไซต์นี้จะบอกโปรแกรมรวบรวมข้อมูลเว็บเกี่ยวกับ 25 โพสต์ล่าสุดเท่านั้น หากคุณต้องการเพิ่มจำนวนลิงก์ในแผนผังเว็บไซต์ให้แทนที่แผนผังเว็บไซต์เริ่มต้นด้วยแผนผังเว็บไซต์ด้านล่าง จะใช้ได้กับ 500 โพสต์ล่าสุดแรก

แผนผังเว็บไซต์: http://example.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500

หากคุณมีโพสต์ที่เผยแพร่มากกว่า 500 บทความในบล็อกของคุณคุณสามารถใช้แผนผังเว็บไซต์สองรายการดังต่อไปนี้:

แผนผังเว็บไซต์: http://example.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500 แผนผังเว็บไซต์: http://example.blogspot.com/atom.xml?redirect=false&start-index=500&max- ผลลัพธ์ = 1,000

การเพิ่ม Custom Robots.Txt ไปยัง Blogger

ตอนนี้ส่วนหลักของบทช่วยสอนนี้คือวิธีเพิ่ม robots.txt ที่กำหนดเองในบล็อกเกอร์ ด้านล่างนี้คือขั้นตอนในการเพิ่ม

1. ไปที่บล็อกบล็อกเกอร์ของคุณ
2. ไปที่ การตั้งค่า >> การตั้งค่าการค้นหา ›› โปรแกรมรวบรวมข้อมูลและการจัดทำดัชนี ›› การกำหนด robots.txt ›› แก้ไข ›› ใช่
3. ตอนนี้วางรหัสไฟล์ robots.txt ของคุณในช่อง
4. คลิกที่ปุ่มบันทึกการเปลี่ยนแปลง
5. เสร็จแล้ว!

• บันทึก

วิธีตรวจสอบไฟล์ Robots.txt ของคุณ

คุณสามารถตรวจสอบไฟล์นี้ในบล็อกของคุณได้โดยเพิ่ม /robots.txt ต่อท้าย URL ของบล็อกในเว็บเบราว์เซอร์ ตัวอย่างเช่น:

http://www.yourblogurl.blogspot.com/ robots.txt

เมื่อคุณไปที่ URL ของไฟล์ robots.txt คุณจะเห็นรหัสทั้งหมดที่คุณใช้อยู่ในไฟล์ robots.txt ที่กำหนดเอง

ดูภาพด้านล่าง

• บันทึก

คำพูดสุดท้าย!

นี่คือบทแนะนำฉบับสมบูรณ์ของวันนี้เกี่ยวกับ วิธีการเพิ่มไฟล์ robots.txt ที่กำหนดเองในบล็อกเกอร์

ฉันพยายามอย่างเต็มที่เพื่อให้บทช่วยสอนนี้ง่ายและให้ข้อมูลมากที่สุด แต่ถ้าคุณมีข้อสงสัยหรือข้อสงสัยอย่าลังเลที่จะถามฉันในส่วนความคิดเห็นด้านล่าง

อย่าใส่โค้ดใด ๆ ในการตั้งค่า robots.txt ที่กำหนดเองโดยที่คุณไม่รู้ เพียงขอให้ฉันแก้ไขข้อสงสัยของคุณ ฉันจะบอกคุณทุกอย่างโดยละเอียด

ขอขอบคุณที่อ่านบทแนะนำนี้ หากคุณชอบโปรดสนับสนุนให้ฉันเผยแพร่คำพูดของฉันโดยแบ่งปันโพสต์นี้ในโปรไฟล์โซเชียลมีเดียของคุณ บล็อกมีความสุข!