Braucht man eine robots.txt – Datei für die Indexierung von Suchmaschinen

Wenn man als junger Webmaster anfängt, eine eigene Webseite ins Internet zu stellen, stolpert man früher oder später über den Begriff beziehungsweise über die Datei robts.txt. Schnell stellt man sich die Frage, ob man diese dann auch für die eigene Homepage benötigt. Besonders bei Webmaster, die Ihre Webseite schneller im Internet bekannt machen wollen, vermuten hinter dieser Datei eine kleine […]

Weiterlesen

Datei oder Verzeichnis für Indexierung von Suchmaschinen sperren

Indexierung für Suchmaschinen sperren – Wenn man sich schon einmal etwas intensiver mit seiner Webseite beschäftigt hat, kommt man irgendwann auch zu dem Thema, wie man eine Datei oder ein Verzeichnis / Ordner für die Indexierung durch Suchmaschinen sperren kann. In regelmäßigen Abständen durchsuchen Suchmaschinen das Internet nach neuen oder geänderten Inhalten und durchsuchen dabei sowohl bereits seit langer Zeit […]

Weiterlesen

Robots txt – Indexierung der Webseite von Suchmaschinen einstellen

  Wer im Internet eine eigene Webseite betreibt, der möchte in der Regel auch von den Suchmaschinen beziehungsweise von Nutzern der Suchmaschine gefunden werden, um so mehr Besucher auf seine Webseite zu erhalten. Schließlich möchte man ja auch für seine Arbeit etwas Anerkennung bekommen. Damit die Suchmaschinen auch eine Webseite richtig indexieren können, muss man ja schon einige Dinge beachten. […]

Weiterlesen