Search Engine Katalog für Esoterik, Naturheilkunde, Medizin & Psychologie

FDSE deutsche Hilfe | englische Hilfe



[ Hilfe: Inhaltsverzeichnis ]
   
Wie können Sie Seiten daran hindern indiziert zu werden.  
     
 

FDSE respektiert die Roboter Ausschlußstandards.

Dieser Standard wird verwendet um Spider daran zu hindern Seiten oder Ordner zu indizieren die nicht in den Spider aufgenommen werden sollen.

Die Datei "robots.txt" steht im Spitzenordner Ihrer Hompage. Das Format der Datei besteht aus ein oder mehreren "User Agent" Headern gefolgt von den Pfaden die dem Spider verboten werden sollen.

Hier ist ein Beispiel:

User Agent:User-Agent: * Disallow: /secret/

User-Agent: BadGuy Disallow: /

User-Agent: FDSE Disallow: /logs/ Disallow: /cgi-bin/



See my robots.txt file for another example, or visit the Standard home page linked below.The robots.txt file marks sections of a site off-limits based on the User-Agent string. The FDSE crawler has a variable User-Agent string which can be customized at "" => "General Settings" => "Crawler: User Agent". When parsing a robots.txt file, the parser will respect any section whose User- matches the "Crawler: User Agent" setting, or that matches string 'FDSE', or that matches string '*'. The parser uses a case insensitive substring match.Alternately, you can forbid access to a single document using a meta tag. Include the following in your HTML source:<HTML>

Sehen Sie my robots.txt Datei für ein anderes Beispiel oder besuchen Sie die unten verbundene Standardhomepage.

Die robots.txt Datei kennzeichnet Abschnitte eines Standorts von Grenzen als auf der User AgentenString basierend.

Der FDSE Crawler hat eine variable User AgentenString die angepaßt werden kann an

"Admin Page" = > "General Settings" = > "Crawler: User Agent".

Wenn er eine robots.txt Datei syntaktisch analysiert respektiert der Parser jeden Abschnitt dessen User Agent Label paßt oder der " Crawler: User Agent " String 'FDSE' oder String '*'.

Der Parser verwendet einen Fall unempfindliches substring match. Abwechselnd können Sie Zugang zu einem einzelnen Dokument verbieten, ein Metaschild zu verwenden.

Die Unterstützung des Roboter Ausschlußstandards können Sie ausschalten unter

"User Interface " - "General Settings " Einstellung" Crawler: Gauner "zu 1,

Sehen Sie auch: Wie können Sie Seiten verbieten

Sehen Sie auch: den Roboter Ausschlußstandard

 
 
Übersetzung Esoterik-web.net der Katalog für Esoterik, Naturheilkund, Medizin & Psychologie
spirit2you.de spirittoyou.de spirit2you.at spirittoyou.ch Lebensberatung24.de Bannernetz2000.de FDSE.eu Suchmaschine, Katalog, Fluid Dynamic Search Engine thue.de Reiki Meister Lehrer natur-fee.de - Mueritz Seminare Seminar - Feriendorf eso4you.de Domainreseller Domain Registration Robot ab 12 Domain