Braucht man eine robots.txt – Datei für die Indexierung von Suchmaschinen
Wenn man als junger Webmaster anfängt, eine eigene Webseite ins Internet zu stellen, stolpert man früher oder später über den Begriff beziehungsweise über die Datei robts.txt. Schnell stellt man sich die Frage, ob man diese dann auch für die eigene Homepage benötigt. Besonders bei Webmaster, die Ihre Webseite schneller im Internet bekannt machen wollen, vermuten hinter dieser Datei eine kleine […]
Weiterlesen