Bəzən bir webmasterın indeksləşdirilmiş səhifələrdən birini axtarış motorundan çıxartması lazımdır. Çox vaxt bu əməliyyata səhvən səhifə xəritəsinin siyahısına səhifə ünvanını daxil etdikdən sonra müraciət olunur. Bir vaxtlar Megafon şirkətinin mütəxəssisləri bu səhvlə qarşılaşdılar (sms mesajları Yandex axtarış motorunun istənilən istifadəçisi üçün əlçatan oldu).
Vacibdir
Şəxsi sayt
Təlimat
Addım 1
Öz veb səhifənizi axtarış motorlarının arxivindən çıxarmaq üçün ən asan yollardan biri fiziki olaraq silmək, yer ünvanını dəyişdirmək və yalan silməkdir (silinmiş səhifənin atributunu təyin etməlisiniz). Bu səhifəni dəyişdirdikdən sonra axtarış robotu məzmunun əvəzinə aşağıdakı sətri görəcəkdir: HTTP / 1.1 404 tapılmadı. Bununla yanaşı, axtarış robotlarının saytı hər 3 saatda, bəlkə də 2-3 gündə bir dəfə ziyarət edə biləcəyini unutmayın. Buna görə nəticəni əldə etmək üçün bir az gözləmək lazımdır.
Addım 2
Növbəti yol, saytınıza gələn kimi tarayıcının yolunu təyin edən robots.txt sənədini düzəltməkdir. Bu mətn sənədində həmişə bir yer var - saytın kökü. Birinci paraqrafda, Yandex robotu üçün indeksləmə parametrləri ümumiyyətlə göstərilir (digər robotlardan nəzərə çarpacaq dərəcədə fərqlənir), ikinci paraqrafda bütün digər axtarış motorları üçün.
Addım 3
Paraqrafın əvvəlində agentin adını "İstifadəçi-Agent: *" və gizlədiləcək səhifələrin ünvanlarını göstərməlisiniz - "İcazə vermə: /wp-content/foto/fotojaba.html". Eyni şəkildə, indeksləşdirmədən bağlamaq istədiyiniz səhifələrin və ya bölmələrin ünvanlarını göstərməlisiniz. Xahiş edirəm unutmayın ki, bu metod tez nəticə vermir. Saytınızın aktivliyi azdırsa və xəbərlər sosial şəbəkələrdə yayımlanmırsa, yeni məlumatların işlənməsi bir neçə gün davam edə bilər. Bundan əlavə, bu səhifələrin versiyalarını axtarış xidmətinin arxivindən silməlisiniz.
Addım 4
Robots.txt faylında əlaqələr qurmaq üçün alternativ bir metod eyni adlı meta robotlar etiketindən istifadə etməkdir. Bu etiket üçün sintaksis belədir: cütləşdirilmiş [baş] və [/baş] etiketlər arasında yerləşdirilməlidir. Robotlar dəyəri meta ad etiketində yerləşdirilməlidir. Bir nümunə belə görünür:.
