Bijna elke webmaster probeert de pagina's van zijn site zo te optimaliseren dat er zoveel mogelijk geïndexeerde elementen binnenkomen. Maar in sommige gevallen moet u juist bepaalde pagina's verbergen, bijvoorbeeld een formulier voor het invoeren van registratiegegevens, het herstellen van wachtwoorden, enz.
Het is nodig
Het Robots.txt-bestand bewerken
instructies:
Stap 1
De eenvoudigste manier om de indexering van verschillende secties of een specifieke hele site te sluiten, is door de juiste vermeldingen in het robots.txt-bestand te maken. Hij wordt gebruikt als gids voor zoekmachines. Bij het betreden van de pagina's van de site verwijst de zoekrobot naar dit bestand, als het er niet is, indexeert het de hele site, anders volgt het de aanbevelingen die in dit bestand zijn gespecificeerd.
Stap 2
Als u uw site zelf heeft gemaakt, en u beschikt niet over een dergelijke toepassing, in de vorm van een tekstdocument waarin de verbodsbepalingen worden vermeld, kunt u deze eenvoudig zelf maken. Open bijvoorbeeld een nieuw tekstdocument met het programma Kladblok. Plaats de volgende regels in de hoofdtekst van het document: User-agent: * Disallow: /file.htmlDisallow: / directory /
Stap 3
Laten we nu eens kijken wat je de zoekmachine als taak hebt gevraagd. Het "*" teken tegenover de User-agent betekent dat deze instructie door absoluut alle bestandssystemen moet worden uitgevoerd. Als u bijvoorbeeld "Yandex" schrijft in plaats van "*", wordt deze oproep alleen gelezen door de robot van de Yandex-zoekmachine. Disallow-instructies verbieden het indexeren van een specifieke sectie (directory) of bestand (.html-bestand).
Stap 4
Na het compileren van het robots.txt-bestand kunt u direct naar de teksten op de sitepagina's gaan. Zoals u weet, houden zoekmachines er niet van om meer dan 3 externe actieve links op uw pagina's te hebben. Wat als je een bloedneus nodig hebt, maar 5 of meer links plaatst. In deze gevallen kunt u een attribuut of een tag gebruiken.
Stap 5
Om links te sluiten van indexering door de Google-zoekmachine, moet u de link in de volgende vorm brengen: ankerlinks. De hoofdtekst van het attribuut moet in elk deel van de link worden ingevoegd, en vergeet niet om het te scheiden met een spatie, d.w.z. het attribuut kan tussen "a" en "href" of tussen de link en zijn anker worden geplaatst.
Stap 6
Om links te sluiten van indexering door de Yandex-zoekmachine, moet u de link in de volgende vorm brengen: ankerlink. De tag wordt aan het begin en aan het einde van de link geplaatst. Vergeet niet dat deze tag gepaard is: het tweede deel, in tegenstelling tot het eerste, wordt geleverd met een "/"-teken.
