So blenden Sie eine Subdomain von Google Spider
"Spinnen", auch bekannt als "Web-Crawler," sind automatisierte Programme, die suchen im Internet und Scannen der Seiten, oder Sub-Domains, sie zu finden. Wenn Spinnen von Suchmaschinen wie Google gesendet werden, ist es meist, da sie Webseiten in Google Index hinzufügen möchten, damit sie Leute finden können, wenn sie Recherchen durch. Aber Sie möchten, einige Teile Ihrer Website von Google, vertraulich zu behandeln, so dass sie nicht in den Google-Suchergebnisseiten auftauchen. Dies kann erreicht werden, mit einem Stück des Codes auf das Verzeichnis, aber der Prozess erfordert FTP Zugang zu vervollständigen.
Anweisungen
1 Öffnen Sie einen Texteditor wie TextEdit oder Notepad. Speichern Sie die Datei auf die Festplatte des Computers als "robots.txt".
2 Geben Sie den folgenden Code in der ersten Zeile der Datei:
Benutzer-Agent: Googlebot
Die erste Zeile des Codes angibt, welche Spinnen willkommen sind und welche nicht. Wenn Sie nur "Googlebot" in dieser Zeile setzen, wird die Subdomain von Spinnen aus anderen Suchmaschinen wie AskJeeves und Bing gecrawlt werden. Wenn Sie alle Spinnen den Zugriff auf das Unterverzeichnis blockieren möchten, platzieren Sie ein Sternchen "*" in dieser Zeile wie folgt:
Benutzer-Agent: *
3 Geben Sie den folgenden Code in der zweiten Zeile der Datei:
Disallow: /path/to/subdirectory/you/want/to/block
Ersetzen Sie "Pfad" durch den tatsächlichen Pfad zu Ihrem Unterverzeichnis relativ zu Ihrer Homepage. Speichern Sie die Datei.
4 Melden Sie den FTP-Account für Ihre Website. Laden Sie die Stammseite und laden Sie Ihre Datei "robots.txt" an diesen Speicherort. Dies wird die Spider der Suchmaschinen, die Sie angeben, auf das Unterverzeichnis, die, das Sie angeben, inklusive aller Dateien und Ordner innerhalb es, das verhindern.
5 Spinnen haben nicht immer den gleichen Namen wie ihre zugehörigen Suchmaschine--, obgleich einige tun. Beispielsweise werden die Spinnen Alta Vista Scooter und Mercator genannt. Wenn Sie Spinnen als Googlebots blockieren möchten, überprüfen Sie Jafsoft.com/searchengines/webbots.html für eine vollständige Liste der aktiven Web-Crawler und ihre zugeordneten Suchmaschinen.