เพิ่มหรืออัปเดตไฟล์ robots.txt
บทความนี้อธิบายวิธีการสร้าง แก้ไข อัปโหลด และตรวจสอบไฟล์ robots.txt สำหรับแต่ละโดเมนที่โฮสต์ใน Microsoft Dynamics 365 Commerce
การรวบรวมข้อมูลเว็บไซต์ของคุณโดยไม่คาดคิดหรือโดยไม่ได้ตั้งใจโดยโปรแกรมค้นหาอาจทำให้เกิดข้อผิดพลาด "404 ไม่พบหน้า" ปริมาณมาก ข้อผิดพลาดเหล่านี้อาจส่งผลต่อประสิทธิภาพเนื่องจากเว็บไซต์ตอบกลับคำขอทั้งหมดสำหรับหน้าที่ไม่มีอยู่ เพื่อช่วยแก้ไขปัญหานี้ คุณควรตรวจสอบให้แน่ใจว่าโดเมนของคุณมีไฟล์ robots.txt ที่อัปเดตและถูกต้องอยู่เสมอ เพื่อสั่งให้โปรแกรมรวบรวมข้อมูลเว็บค้นหาเฉพาะหน้าเว็บที่เกี่ยวข้องในเว็บไซต์ของคุณ
ใช้กับ
บทความนี้ใช้กับการกำหนดค่าต่อไปนี้:
- เวอร์ชัน: Commerce 10.0.16 หรือใหม่กว่า
- ส่วนประกอบ: Business-to-consumer (B2C) หรือที่อยู่ธุรกิจ (B2B)
- พื้นที่คุณลักษณะ: ประสิทธิภาพของเว็บไซต์ Commerce
ข้อกำหนดเบื้องต้น
คุณเป็น ผู้ดูแลระบบ ในอินสแตนซ์ Commerce ของคุณ
คุณได้สร้างไฟล์ robots.txt บนคอมพิวเตอร์ของคุณหรือดาวน์โหลดสำเนา ขึ้นอยู่กับสถานการณ์ของคุณ:
- หากคุณไม่เคยอัปโหลดไฟล์ robots.txt สำหรับโดเมนของคุณมาก่อน ให้สร้างไฟล์ใหม่บนคอมพิวเตอร์ของคุณโดยปฏิบัติตาม มาตรฐานการยกเว้นของ robots ใช้ ตัวอย่างไฟล์ robots.txt ที่อยู่ต่อไปในบทความนี้เป็นจุดเริ่มต้น
- หากคุณเคยอัปโหลดไฟล์ robots.txt สำหรับโดเมนของคุณก่อนหน้านี้ ดาวน์โหลด ไฟล์ที่มีอยู่
ขั้นตอนในการทำให้เสร็จสมบูรณ์
หากต้องการแก้ไขและอัปโหลดไฟล์ robots.txt ให้ทำตามขั้นตอนเหล่านี้
- เปิดสำเนาไฟล์ robots.txt ในเครื่องของคุณ
- แก้ไขไฟล์เพื่อให้รวมรายการ ไม่อนุญาต ทั้งหมดใน ตัวอย่างไฟล์ robots.txt ที่ตามมา
- ยืนยันว่าไฟล์มีรูปแบบถูกต้องตาม มาตรฐานการยกเว้นของ robots
- อัปโหลดไฟล์ไปยังเว็บไซต์ของคุณโดยทำตามคำแนะนำใน อัปโหลดไฟล์ robots.txt
ตัวอย่างเนื้อหาไฟล์ robots.txt
User-agent: *
Disallow: /signin
Disallow: /cart
Disallow: /*refiners=
Disallow: /*sorting=
Disallow: /*search?
Disallow: /*search=
Disallow: /*.woff
Disallow: /*.woff2
Disallow: /*skip=
ตรวจสอบความถูกต้อง
ใช้วิธีการตรวจสอบว่ามีการเพิ่มไฟล์แล้วดังต่อไปนี้:
- การอธิบายหรือวัตถุประสงค์: ตรวจสอบว่า robots.txt การตรวจสอบความถูกต้องว่าไฟล์ผลิตภัณฑ์พร้อมใช้งานเฉพาะที่โดเมนของคุณ
- ขั้นตอนในการรัน: ในเว็บเบราเซอร์ ให้เปิดหน้าที่ your_domain <>/robots.txt ใหม่
- ผลลัพธ์ที่ผ่าน: คุณสามารถดูไฟล์ robots.txt เสร็จเรียบร้อยแล้ว