Paginile indexate de motoarele de căutare asigură un trafic stabil către resursă. Dar dacă în acest moment site-ul dvs. este în curs de dezvoltare, atunci apariția roboților de căutare pe paginile resursei este extrem de nedorită, deoarece informațiile despre secțiunile neumplute care au intrat în căutare vă pot priva resursa de vizitatori vizați pentru o lungă perioadă de timp. Pentru a proteja temporar site-ul împotriva accesării cu crawlere de către roboți, trebuie să-i interziceți indexarea. Pentru a face acest lucru, este suficient să faceți câteva modificări simple în codul resursei.
Este necesar
- - să aibă cel puțin cunoștințe de bază despre HTML
- - știți cum să deschideți folderul rădăcină al directorului de fișiere al site-ului dvs.
Instrucțiuni
Pasul 1
Mai întâi, verificați dacă site-ul dvs. are un fișier robots.txt care este responsabil pentru indexarea corectă a resursei. Pentru a face acest lucru, accesați http: ⁄ ⁄ www site ru ⁄ robots.txt ⁄, înlocuind http: ⁄ ⁄ www site ru cu adresa site-ului dvs. web.
Pasul 2
Dacă, când faceți clic pe acest link, se deschide o înregistrare a formularului „User-agent: * Disallow …”, atunci acest lucru înseamnă că fișierul necesar este prezent pe site-ul dvs. În acest caz, accesați folderul rădăcină unde sunt stocate toate fișierele site-ului dvs. și găsiți fișierul robots.txt.
Pasul 3
Dacă sistemul de management al site-ului dvs. vă permite să editați acest fișier direct din folderul rădăcină, deschideți robots.txt printr-un serviciu auxiliar. Dacă este imposibil să faceți modificări la fișier prin intermediul interfeței de sistem, salvați documentul pe computer, apoi deschideți-l prin programul Notepad.
Pasul 4
Schimbați primele două linii ale documentului cu următoarele:
Agent utilizator: *
Nu permiteți: /.
Inscripția „User-agent: *” indică faptul că următoarele reguli se aplică tuturor roboților de căutare, iar „Disallow: /” înseamnă că întregul site nu este indexat. După corectarea conținutului, salvați fișierul.
Pasul 5
Dacă site-ul dvs. nu are un fișier robots.txt, creați un nou document în Notepad. Introduceți aceleași două intrări în ea, plasând fiecare dintre ele pe o nouă linie și salvați fișierul utilizând comanda „Fișier-Salvați ca …” sub numele robots.txt.
Pasul 6
Încărcați documentul creat în folderul rădăcină al site-ului dvs. și verificați funcționarea acestuia urmând din nou linkul http: ⁄ ⁄ www · site · ru ⁄ robots.txt ⁄, unde în loc de „http: ⁄ ⁄ www · site · ru” introduceți adresa resursei dvs.
Pasul 7
O altă modalitate de a interzice indexarea este de a insera metaetichete speciale în codul HTML al paginilor site-ului. Pentru a utiliza această metodă, găsiți în codul uneia dintre paginile site-ului inscripțiile " și plasați-l imediat după " linia ".
Pasul 8
Dacă site-ul dvs. este scris în HTML, atunci acest cod trebuie inserat pe fiecare pagină. Pentru o resursă PHP, este suficient să plasați o astfel de intrare în fișierul header.php.
