Cum să dezactivezi indexarea site-ului
Câine roz, cățeluș foarte roz. Câine roz pentru toate gusturile. Câine roz. Cumpără un câine roz. Câine roz. Numai aici și acum - câini roz Câine roz.
Este clar că un astfel de text va fi foarte optimizat pentru cuvântul „câine roz”. Cu toate acestea, aceasta este o încălcare și o încercare de a înșela motorul de căutare. Și etichetele în acest caz îi spun lui Yandex să nu indexeze această bucată de text. Cu alte cuvinte, motorul de căutare nu va impune nicio sancțiune pe o astfel de pagină, deoarece toate metodele ilegale sunt ascunse de robotul de căutare folosind eticheta.
Din păcate, etichetele nu sunt standard. Aceasta este o „invenție” a lui Yandex. Uneori, același instrument lipsește foarte mult pentru Google. Googlebot, nu mergeți acolo. Du-te aici. (atribut nofollow)
Nici această soluție nu este portabilă, adică funcționează doar pentru Googlebot. Cu toate acestea, încă merită să știți despre asta. Este foarte util să utilizați atributul nofollow atunci când vă optimizați paginile pentru a obține mai mult Page Rank de la Google. (Voi vorbi mai multe despre Page Rank într-un număr viitor.) Concluzii
Am analizat principalele modalități pe care le puteți utiliza pentru a controla indexarea site-ului dvs. de către diverși roboți de căutare. Singura soluție universală este utilizarea fișierului robots.txt. Toate celelalte metode nu sunt universale. Ele sunt aplicabile doar anumitor motoare de căutare (este posibil ca multe dintre ele să fie incluse în viitoarele standarde HTML), dar trebuie să știți despre ele.