WIKI · SUCHMASCHINEN
robots.txt
Die robots.txt ist eine kleine Textdatei, die Suchmaschinen sagt, welche Bereiche sie nicht abrufen sollen.
Begriffserklärung — zwei Minuten.
ERKLÄRUNG
robots.txt in der Praxis
Die robots.txt ist eine kleine Textdatei, die Suchmaschinen sagt, welche Bereiche sie nicht abrufen sollen.
Was dahintersteckt
Sie liegt direkt unter Ihrer Adresse mit Schrägstrich robots.txt und ist öffentlich lesbar — bei jeder Website, auch bei Ihrer. Meist stehen dort zwei bis drei Zeilen: der Verwaltungsbereich ist gesperrt, und die Sitemap wird genannt.
Warum es für einen Betrieb zählt
Sie steuert das Abrufen, nicht die Anzeige. Eine Seite, die dort gesperrt ist, kann trotzdem in den Suchergebnissen auftauchen — nur ohne Text. Wer eine Seite wirklich heraushalten will, braucht den Vermerk noindex auf der Seite selbst.
ZUM NACHSEHEN
Rufen Sie Ihre Adresse mit Schrägstrich robots.txt auf. Steht dort Disallow mit einem einzelnen Schrägstrich dahinter, ist Ihre ganze Website gesperrt — das kommt nach Umzügen vor und bleibt manchmal monatelang unbemerkt.
„Eine Stadtseite ohne eigene Inhalte ist eine Behauptung. Mit eigenen Inhalten ist sie ein Nachweis.“
Aus unserem Bauplan-Leitfaden, Abschnitt „Regionale Bereiche“
Ausführlich steht das im Leitfaden: Die Seitenliste für Suchmaschinen. Verwandte Begriffe: Sitemap · Indexierung.
AUTOR UND QUELLEN
Christof Oppermann
Inhaber 12web, Neuss
Baut seit 15 Jahren Websites, seit 2018 mit Schwerpunkt auf Handwerks- und Mittelstandsbetrieben in Nordrhein-Westfalen. Die Erklärungen stammen aus gebauten Seiten, nicht aus Lehrbüchern.
Geprüft am 26.08.2026
01
Eigene Suchbegriff-Recherche 12web
35 dokumentierte Bausteine mit 471 benannten Feldern — Grundlage der Aussagen zum Seitenaufbau
02
Bauteil-Bibliothek 12web
Offen einsehbar unter /kalkulator/ — Grundlage der genannten Preise und Umfänge
03
Handwerkskammer Düsseldorf — Konjunkturbericht Handwerk
Preisrechner auf 12web.de
Erst reden,
dann rechnen.
Das erste Gespräch kostet nichts und verpflichtet zu nichts. Wenn wir die Falschen sind, sagen wir es im Telefonat.
Sie schicken das Formular oder rufen an.
Antwort am selben Werktag, bis 18 Uhr.
Telefonat, eine Stunde, zum Wunschtermin.
Festpreisangebot auf einer Seite, schriftlich.
In zwei Minuten ausgefüllt
Ihre Angaben gehen verschlüsselt direkt an uns und werden nicht weitergegeben.
