De door zoekmachines geïndexeerde pagina's zorgen voor stabiel verkeer naar de bron. Maar als uw site op dit moment in ontwikkeling is, is het verschijnen van zoekrobots op de pagina's van de bron zeer ongewenst, omdat informatie over niet-gevulde secties die in de zoekopdracht zijn terechtgekomen, uw bron voor een lange tijd van doelbezoekers kan beroven. Om de site tijdelijk te beschermen tegen crawlen door robots, moet u de indexering verbieden. Om dit te doen, volstaat het om een paar eenvoudige wijzigingen in de broncode aan te brengen.
Het is nodig
- - minimaal basiskennis van HTML hebben
- - weet hoe u de hoofdmap van de bestandsmap van uw site moet openen
instructies:
Stap 1
Controleer eerst of uw site een robots.txt-bestand heeft dat verantwoordelijk is voor de juiste indexering van de bron. Ga hiervoor naar http: ⁄ ⁄ www site ru ⁄ robots.txt ⁄ en vervang http: ⁄ ⁄ www site ru door uw websiteadres.
Stap 2
Als, wanneer u op deze link klikt, een record van het formulier "User-agent: * Disallow …" wordt geopend, betekent dit dat het vereiste bestand op uw site aanwezig is. Ga in dit geval naar de hoofdmap waar al uw sitebestanden zijn opgeslagen en zoek het robots.txt-bestand.
Stap 3
Als het beheersysteem van uw site u toestaat dit bestand rechtstreeks vanuit de hoofdmap te bewerken, opent u robots.txt via een hulpservice. Als het onmogelijk is om wijzigingen in het bestand aan te brengen via de systeeminterface, slaat u het document op uw computer op en opent u het vervolgens via het Kladblok-programma.
Stap 4
Wijzig de eerste twee regels van het document in het volgende:
Gebruiker-agent: *
Niet toestaan: /.
Het opschrift "User-agent: *" geeft aan dat de volgende regels van toepassing zijn op alle zoekrobots, en "Disallow: /" betekent dat de hele site niet wordt geïndexeerd. Sla het bestand op nadat u de inhoud heeft gecorrigeerd.
Stap 5
Als uw site geen robots.txt-bestand heeft, maakt u een nieuw document in Kladblok. Voer dezelfde twee items in, plaats ze elk op een nieuwe regel en sla het bestand op met de opdracht "Bestand-opslaan als …" onder de naam robots.txt.
Stap 6
Upload het gemaakte document naar de hoofdmap van uw site en controleer de werking ervan door opnieuw de link http: ⁄ ⁄ www · site · ru ⁄ robots.txt ⁄ te volgen, waar in plaats van "http: ⁄ ⁄ www · site · ru" wordt ingevoerd het adres van uw bron.
Stap 7
Een andere manier om indexering te verbieden, is door speciale metatags in de HTML-code van sitepagina's in te voegen. Om deze methode te gebruiken, zoekt u in de code van een van de pagina's van de site de inscripties " en plaatst deze onmiddellijk na de " regel ".
Stap 8
Als uw site in HTML is geschreven, moet deze code op elke pagina worden ingevoegd. Voor een PHP-resource is het voldoende om zo'n item in het header.php-bestand te plaatsen.
