„Die Unterlage ist nur für Interessierte gedacht; bitte nicht bei Google anzeigen.“ Mit diesem Satz ist noch nicht entschieden, wer die Datei tatsächlich öffnen darf. Vielleicht soll eine allgemeine Besichtigungscheckliste ohne Suchtreffer erreichbar bleiben. Vielleicht enthält die Datei jedoch persönliche Angaben und darf nur an ausdrücklich berechtigte Personen gehen. Die technische Aufgabe ist in beiden Fällen verschieden.
Diese Werkstatt richtet sich an Immobilienunternehmen mit eigener Website oder beauftragter Websitebetreuung in Österreich und Deutschland. Sie ist ein eigener Ablauf zur verständlichen Beauftragung. Weder eine fremde Website noch ein geschützter Bereich wird hier geprüft oder verändert. Konkrete Schutzmaßnahmen müssen für die eigene Umgebung fachlich bestimmt und umgesetzt werden.
Drei Fragen statt eines unscharfen Wortes
Beschreibe zuerst die Zielgruppe: Darf jede Person mit der Adresse die Datei lesen, oder ist eine tatsächliche Berechtigung erforderlich? Frage danach nach der Suchdarstellung: Soll das Dokument über Suchmaschinen auffindbar sein? Erst anschließend kommt die Frage, welche automatisierten Abrufe erwünscht sind und wie die technische Betreuung damit umgeht.
Diese Reihenfolge verhindert einen typischen Fehlschluss. „Nicht auffindbar“ ist keine präzise Beschreibung für „vertraulich“. Auch eine bewusst nicht in einer Navigation genannte Datei kann eine eigene aufrufbare Adresse besitzen. Ob dort ein wirksamer Schutz besteht, ist deshalb eine gesonderte Prüfaufgabe.
In unserem erfundenen Büro liegen drei Dokumente vor: eine allgemeine Umzugscheckliste, eine noch nicht freigegebene Textvorschau und eine fallbezogene Unterlage. Die Checkliste kann als öffentliche Wissenshilfe gedacht sein. Die Vorschau soll zunächst nur der vereinbarten Redaktion zugänglich sein. Bei der Fallunterlage werden erforderliche Empfänger, Datenumfang und passender Übermittlungsweg vorab geklärt. Ein identischer Uploadordner wäre noch kein Beleg, dass diese drei Ziele erfüllt sind.
Was robots.txt tatsächlich beschreibt
Google erläutert robots.txt als Mittel zur Steuerung des Crawling-Verkehrs. Die Dokumentation warnt ausdrücklich davor, damit textbasierte Webseiten und PDFs zuverlässig aus der Suche verbergen zu wollen. Eine blockierte URL kann unter bestimmten Umständen trotzdem in Suchergebnissen erscheinen. Außerdem befolgen nicht sämtliche Crawler solche Anweisungen. [ROBOTS]
Für deinen Auftrag bedeutet das: Eine Aussage wie „der Ordner steht in robots.txt“ beantwortet nicht die Frage, ob unberechtigte Personen die Datei öffnen können. Verlange eine getrennte Beschreibung des vorgesehenen Zugangs. Der Artikel empfiehlt keine bestimmte Serverkonfiguration und erklärt keine einzelne Einstellung zum vollständigen Sicherheitskonzept.
Wofür noindex verwendet wird
Google beschreibt noindex als Regel zur Verhinderung der Aufnahme in den unterstützenden Suchindex. Damit Google sie erkennen kann, muss der Crawler die betreffende Ressource abrufen können; eine gleichzeitige Crawling-Sperre kann gerade diese Erkennung verhindern. Für nicht als HTML vorliegende Inhalte nennt die Dokumentation unter anderem einen passenden HTTP-Antwortheader. [NOINDEX]
Das ist für öffentlich lesbare Inhalte mit gewünschter eingeschränkter Suchdarstellung relevant. Es beantwortet weiterhin nicht, welcher Mensch eine vertrauliche Datei lesen darf. Die Absicht „aus dem Google-Index“ und die Absicht „nur für berechtigte Empfänger“ gehören deshalb als unterschiedliche Anforderungen in den Auftrag.
Lasse technische Details von der zuständigen Betreuung auf die tatsächliche Website übertragen. Ein Codefragment aus einem Ratgeber wäre ohne Kenntnis der Auslieferung und der übrigen Regeln keine belastbare Abnahme. Auch dieser Text verspricht weder ein bestimmtes Suchergebnis noch eine sofortige Entfernung.
Die Datei und ihre Umgebung gemeinsam betrachten
Der sichtbare Downloadknopf ist nur ein Teil des Verteilwegs. Im eigenen Auftrag sollten die tatsächliche Dateiadresse, gegebenenfalls Vorschauen und bewusst angebotene alternative Fassungen genannt werden. Sonst wird möglicherweise die Übersichtsseite eingeschränkt, während eine andere Fassung weiter auf anderem Weg bereitsteht.
Im Muster entfernt das Team den Vorschauknopf aus einer öffentlichen Seite. Anschließend gilt die Aufgabe intern zunächst als erledigt. Bei der Rückfrage stellt sich heraus: Geprüft wurde nur der Knopf, nicht die verabredete Zugangsbeschränkung der Datei. Das Team korrigiert deshalb den Prüfauftrag. Es unterstellt weder einen tatsächlichen Datenabfluss noch eine automatisch sichere neue Lösung.
Eine spätere autorisierte Kontrolle sollte die konkrete Dateifassung und den vorgesehenen Benutzerzustand benennen. „Als zuständige Redakteurin geöffnet“ belegt nicht dieselbe Frage wie „als nicht berechtigte Person nicht zugänglich“. Wie solche Kontrollen sicher und zulässig durchgeführt werden, legt die zuständige Fachperson fest.
Ein Auftrag, den beide Seiten gleich verstehen
Schreibe für jede Unterlage einen kurzen Satz zu Zweck, Empfängerkreis und gewünschter Suchdarstellung. Ergänze die konkrete Fassung und die verantwortliche Person. Bei vertraulichen Unterlagen wird der passende Schutz gesondert beauftragt; bei öffentlichen Downloads wird die Veröffentlichung der bereinigten Fassung geprüft.
Die Abnahme beschreibt anschließend genau, was festgestellt wurde: etwa die Sichtbarkeit der freigegebenen Checkliste oder die fachlich geprüfte Zugangsbeschränkung einer bezeichneten Vorschau. Offene Punkte wie ältere Verteilwege bleiben offen dokumentiert. Der bloße Austausch eines Links darf diese Frage nicht unsichtbar machen.
Bereits weitergegebene Kopien sind außerdem ein eigener Arbeitsstand. Ein geänderter Weblink ist kein Nachweis, dass jede früher gespeicherte Datei verschwunden ist. Besteht der Verdacht einer unberechtigten Offenlegung, gehört dieser konkrete Fall zeitnah zu den verantwortlichen Fachpersonen und in den vorgesehenen Vorfallsprozess; dieser Leitfaden bewertet keine Meldepflicht.
Das Ergebnis ist eine verständliche Verteilentscheidung mit passendem technischen Auftrag. Du musst dafür nicht jede Serverregel selbst schreiben. Du solltest aber nachvollziehen können, ob über Suchdarstellung, automatisierte Abrufe oder tatsächliche Leseberechtigung gesprochen wird.