Ausschließen von Web-Seiten von Suchmaschinen Meta Robots Stichworte

Sie können Meta-Roboter-Tags verwenden, um eine Suchmaschine Spider Crawling bestimmte Seiten in Ihrer Website zu verhindern. Sie können einen speziellen Tag im HTML-Code der Seite gehören Roboter zu sagen, nicht die Seite zu indizieren, oder nicht, die Links auf dieser Seite zu folgen. Sie würden diesen Tag, nach dem anderen platzieren Meta Tags, die einen Teil des HTML-Codes befinden sich im Kopfteil einer Webseite.

Meta-Tags mit Robotern ist weniger effizient als eine standortweite Roboter Textdatei aus zwei Gründen verwendet wird. Zunächst Roboter manchmal Meta-Tags Roboter ignorieren, und zweitens, diese Tags, um die Roboter zu lesen Ihre Seiten verlangsamen, was die Anzahl der Seiten verringern können sie bereit zu kriechen sind. Außerdem kann diese Methode Ihre Webmaster Kopfschmerzen geben, weil die Tags auf den einzelnen Seiten eingehalten werden müssen, und nicht in einer zentralen Datei.

Die Meta-Robots-Tag teilt unter die Suchmaschine Roboter nicht zum Indizieren der Seite und nicht auf einen der Links auf der Seite zu folgen:

Sie könnten mit diesem Tag, den Roboter zu sagen, um den Inhalt der Seite lesen und zu indizieren, aber nicht auf einen der Links zu folgen:

Das nächste Tag weist den Roboter den Inhalt der Seite, zu ignorieren, aber die Links folgen: