Dateien für Suchmaschinen sperren

Mit einer Datei mit dem Namen robots.txt im Grundverzeichnis einer Domain kann man für Suchmaschinen bestimmte Dateien sperren.
Wobei sperren das falsche Wort ist. Man kann ihnen mitteilen das man nicht möchte das sie das tun. Nur verhindern kann man es damit natürlich nicht.

robots.txt


# robots.txt Beispiel

User-agent: *
Disallow: /gesperrtesverzeichnis/
Disallow: /test/gespertedatei.html




Mit # kann man eine Kommentarzeile kennzeichnen
User-agent ist die Suchmaschnine die man ansprechen will. In diesem Fall * für alle Suchmaschinen.
Mit Disallow: kann man dann ganze Verzeichnisse oder einzelne Datein sperren.












  • HTML Beispiele
    		•
  • HTML Internetseiten
    		•
  • rel="nofollow"
    		•
  • noindex
    		•
  • Javascript Beispiele
    		•
  • Popup
    		•
  • Zufalls Banner
    		•
  • Link verschlüsseln
    		•
  • Aufrufen
    		•
  • Iframe
    		•
  • Favoriten/Startseite
    		•
  • curserstyle
    		•
  • cookie
    		•
  • Linie
    		•
  • Bilder umschalten
    		•
  • Timer
    		•
  • Hilfe
    		•
  • PHP Beispiele
    		•
  • Zähler
    		•
  • SEO Analyse
    		•
  • Kontaktformular
    		•
  • Java im PHP
    		•
  • Link verstecken
    		•
  • Pop-Up
    		•
  • Session
    		•
  • Basic Beispiele
    		•
  • Datenbindung
    		•
  • HTML Formulare
    		•
  • Spamgrafik
    		•
  • Javascript erstellen
    		•
  • PHP/MYSQL
    		•
  • Visualbasic / C++
    		•
  • Youtube/Twitter
    		•
  • Markt Nischen
    		•
  • Motivation
    		•
  • Partnerprogramme
    		•
  • Kelly-Team
    		•
  • Haus und Garten
    		•
  • Reparatur/Ersatzteile
    		•
  • Impressum
    •