Fast jeder Webmaster versucht, die Seiten seiner Site so zu optimieren, dass er möglichst viele indexierte Elemente erhält. In einigen Fällen müssen Sie jedoch einige Seiten ausblenden, z. B. ein Formular zum Eingeben von Registrierungsdaten, Wiederherstellen von Passwörtern usw.
Es ist notwendig
Bearbeiten der Robots.txt-Datei
Anleitung
Schritt 1
Der einfachste Weg, die Indexierung mehrerer Abschnitte oder einer bestimmten gesamten Site abzuschließen, besteht darin, die entsprechenden Einträge in der Datei robots.txt vorzunehmen. Er wird als Leitfaden für Suchmaschinen verwendet. Beim Betreten der Seiten der Site verweist der Suchroboter auf diese Datei, wenn sie nicht vorhanden ist, indiziert er die gesamte Site, andernfalls folgt er den in dieser Datei angegebenen Empfehlungen.
Schritt 2
Wenn Sie Ihre Website selbst erstellt haben und keine solche Anwendung in Form eines Textdokuments mit den Verboten haben, können Sie sie ganz einfach selbst erstellen. Öffnen Sie beispielsweise ein neues Textdokument mit dem Programm Notepad. Fügen Sie die folgenden Zeilen in den Textkörper des Dokuments ein: User-agent: * Disallow: /file.htmlDisallow: / directory /
Schritt 3
Lassen Sie uns nun herausfinden, was Sie der Suchmaschine als Aufgabe gestellt haben. Das "*"-Zeichen gegenüber dem User-Agent bedeutet, dass diese Anweisung von absolut allen Dateisystemen ausgeführt werden muss. Wenn Sie beispielsweise „Yandex“anstelle von „*“schreiben, wird dieser Aufruf nur vom Roboter der Yandex-Suchmaschine gelesen. Disallow-Anweisungen verbieten die Indizierung eines bestimmten Abschnitts (Verzeichnisses) oder einer Datei (.html-Datei).
Schritt 4
Nach dem Kompilieren der robots.txt-Datei können Sie direkt zu den Texten auf den Seiten der Site gehen. Wie Sie wissen, mögen Suchmaschinen nicht mehr als 3 externe aktive Links auf Ihren Seiten. Was ist, wenn Sie Nasenbluten brauchen, aber 5 oder mehr Links posten. In diesen Fällen können Sie ein Attribut oder ein Tag verwenden.
Schritt 5
Um Links von der Indexierung durch die Google-Suchmaschine zu schließen, müssen Sie den Link in die folgende Form bringen: Ankerlinks. Der Body des Attributs muss in einen beliebigen Teil des Links eingefügt werden, und vergessen Sie nicht, ihn durch ein Leerzeichen zu trennen, d.h. das Attribut kann zwischen "a" und "href" oder zwischen dem Link und seinem Anker platziert werden.
Schritt 6
Um Links von der Indexierung durch die Yandex-Suchmaschine zu schließen, müssen Sie den Link in die folgende Form bringen: Ankerlink. Das Tag wird am Anfang und am Ende des Links platziert. Vergessen Sie nicht, dass dieses Tag gepaart ist: Der zweite Teil enthält im Gegensatz zum ersten ein "/"-Zeichen.
