Сайт бүрийн хуудсыг хайлтын роботууд тогтмол мөлхдөг бөгөөд тэдгээр нь сайтын мэдээллийг боловсруулж хайлтын систем дэх хэрэглэгчдийн хүсэлтээр ашиглах боломжтой болгодог. Хайлтын системээс ирсэн зочдын зочлолт нь сайтын хөдөлгөөнд сайнаар нөлөөлж, нөөцийн хөгжлийг идэвхжүүлдэг. Гэхдээ, хэрэв сайт дээр байгаа хуудсууд байгаа бол мэдээлэл нь интернетийн үзэгчдэд зориулагдаагүй болно (жишээлбэл, хэрэглэгчийн хувийн хуудас эсвэл бүртгэлийн хуудас), хайлтын системээс ийм хуудсанд шилжих шаардлагагүй болно. энэ мэдээллийг индексжүүлэхийг хориглох нь дээр.
Шаардлагатай
- - өөрийн вэбсайттай байх
- - индексжүүлэхийг хориглох ёстой хуудсуудын холбоосыг мэдэх.
- - HTML-ийн талаар дор хаяж анхан шатны мэдлэгтэй байх
Зааварчилгаа
1-р алхам
Хайлтын роботыг сайтын зарим хуудсыг индексжүүлэхээс урьдчилан сэргийлэхийн тулд robots.txt файлд, хэрэв танай сайт дээр аль хэдийн орсон бол өөрчлөлт оруулах эсвэл энэ файлыг үүсгэх шаардлагатай.
Алхам 2
Хэрэв robots.txt файлыг сайтад байршуулсан байгаа бөгөөд энэ файлыг нөөцийн хяналтын самбараас шууд засах боломжтой бол robots.txt-ийг вэб үйлчилгээгээр нээж засварлах боломжтой.
Алхам 3
Хэрэв хүссэн файлдаа шууд хяналтын самбараас өөрчлөлт оруулах арга байхгүй бол robots.txt файлыг энэ файлын холбоос дээр дарж хөтөч дээр нээнэ үү. Нээгдсэн хуудсан дээрх бүх өгөгдлийг хуулж аваад Notepad дээрх хуудсан дээр буулгана уу.
Алхам 4
Хэрэв сайт дээр robots.txt байхгүй бол "Notepad" програмыг нээгээд шинэ баримт бичигт шаардлагатай кодыг оруулах шаардлагатай болно.
Алхам 5
Текст баримт бичгийн хоосон хуудсан дээр эхний шаардлагатай мөрийг бичнэ үү:
Хэрэглэгчийн төлөөлөгч: *
Алхам 6
Дараа нь Enter товчийг дарж дараагийн мөрөнд ороод дараах кодыг оруулна уу.
Зөвшөөрөхгүй байх: / индекс / хуудас3 Зөвшөөрөхгүй: индексжүүлээгүйг илтгэнэ, / индекс / хуудас3 бол индексжүүлэх шаардлагагүй хуудасны холбоос юм. Холбоос / индекс / хуудас3-ийн оронд сайтынхаа хуудсанд роботоор боловсруулахад хориглох линкийг оруулна уу.
Алхам 7
Холбоосын эхэнд домэйн нэр өөрөө байхгүй байгааг анхаарна уу; оруулгад байгаа нь шууд налууг илэрхийлнэ. Сайтыг мөлхөх үед хайлтын робот нь ийм холбоосууд руу домэйн нэрийг автоматаар оруулдаг. Тиймээс шаардлагатай хуудсуудын холбоосыг ийм байдлаар бичнэ үү.
Алхам 8
Зөвшөөрөлгүй болсны дараа: та зөвхөн тодорхой хуудасны холбоос төдийгүй сайтын аль ч хэсэг, лавлах линкийг байрлуулж болно. Үүнтэй адил та сайтын хүссэн хэсгийг индексжүүлэхийг хориглож болно.
Алхам 9
Хэрэв нөөцийн хэд хэдэн өөр өөр хэсгүүдийг роботоор боловсруулахыг хориглох шаардлагатай бол хэсэг, хуудас бүрийн холбоосыг шинэ мөрөнд бичиж, эхэнд нь Disallow: entry гэж оруулахаа мартуузай.
Алхам 10
Robots.txt-ийг өөрчилж дуусгахын тулд файлыг хянах самбар дээр засахдаа "Хадгалах" товчийг дарна уу, эсвэл оруулгатай текст документыг robots.txt нэрээр хадгалаад сайтад байршуулна уу.