Deyarli har bir veb-usta o'z saytining sahifalarini iloji boricha ko'proq indekslangan elementlarni olish uchun optimallashtirishga harakat qiladi. Ammo ba'zi hollarda, aksincha, ba'zi sahifalarni yashirishingiz kerak, masalan, ro'yxatga olish ma'lumotlarini kiritish, parollarni tiklash va hk.
Bu zarur
Robots.txt faylini tahrirlash
Ko'rsatmalar
1-qadam
Bir nechta bo'limlarni yoki ma'lum bir saytni indekslashni yopishning eng oson yo'li robots.txt faylida tegishli yozuvlarni kiritishdir. U qidiruv tizimlari uchun qo'llanma sifatida ishlatiladi. Sayt sahifalariga kirishda qidiruv robot ushbu faylga ishora qiladi, agar u yo'q bo'lsa, u butun saytni indekslaydi, aks holda ushbu faylda ko'rsatilgan tavsiyalarga amal qiladi.
2-qadam
Agar siz o'zingizning saytingizni o'zingiz yaratgan bo'lsangiz va sizda bunday dastur mavjud bo'lmasa, taqiqlarni ko'rsatadigan matnli hujjat shaklida bo'lsa, uni o'zingiz yaratishingiz oson. Masalan, bloknot dasturi yordamida yangi matnli hujjatni oching. Hujjat tarkibiga quyidagi satrlarni joylashtiring: User-agent: * Disallow: /file.htmlDisallow: / directory /
3-qadam
Endi qidiruv tizimidan vazifa sifatida nimani so'raganingizni aniqlaylik. Foydalanuvchi-agentga qarama-qarshi "*" belgisi bu ko'rsatmani mutlaqo barcha fayl tizimlari bajarishi kerakligini anglatadi. Masalan, "*" o'rniga "Yandex" yozsangiz, ushbu murojaat faqat Yandex qidiruv tizimining roboti tomonidan o'qiladi. Ruxsatnomalar ma'lum bir bo'lim (katalog) yoki faylni (.html fayli) indekslashni taqiqlaydi.
4-qadam
Robots.txt faylini yig'gandan so'ng, to'g'ridan-to'g'ri sayt sahifalaridagi matnlarga o'tishingiz mumkin. Ma'lumki, qidiruv tizimlarida sizning sahifalaringizda 3 dan ortiq tashqi faol havolalar bo'lishi yoqmaydi. Agar burundan qon ketishi kerak bo'lsa, lekin 5 yoki undan ortiq havolani joylashtiring. Bunday hollarda siz atribut yoki yorliqdan foydalanishingiz mumkin.
5-qadam
Google qidiruvi tomonidan indekslangan havolalarni yopish uchun havolani quyidagi shaklga kiritishingiz kerak: langar havolalari. Atribut tanasi havolaning biron bir qismiga kiritilishi kerak, uni bo'sh joy bilan ajratishni unutmaslik kerak, ya'ni. atribut "a" va "href" orasiga yoki havola va uning langari orasiga joylashtirilishi mumkin.
6-qadam
Yandeks qidiruv tizimi tomonidan indekslangan havolalarni yopish uchun siz havolani quyidagi shaklga kiritishingiz kerak: anker link. Teg havolaning boshida va oxirida joylashtiriladi. Ushbu yorliqning birlashtirilganligini unutmang: ikkinchi qism, birinchisidan farqli o'laroq, "/" belgisi bilan birga keladi.
