Joomla content mit robots.txt verstecken

[HPB]

Hallo,
ich habe bei meiner Joomla Installation von Beginn an folgende robots.txt Datei hinterlegt:

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /editor/
Disallow: /help/
Disallow: /images/
Disallow: /includes/
Disallow: /language/
Disallow: /mambots/
Disallow: /media/
Disallow: /modules/
Disallow: /templates/
Disallow: /installation/

Dennoch liefert eine Suche mit Google Treffer. Es handelt sich um Links wie <meine_domain>/index.php?option=com_content&task=view&id=4&Itemid=10

Wie kann ich meine Seite schützen?

Danke,
Peter

 

[adtp]

Hallo,
Voreinstellung bei einer Joomla-Installation ist das die aufgeführten Verzeichnisse nicht indexiert werden sollen. Aber natürlich soll der Inhalt den Du mit der site: Abfrage bekommst von den Suchmaschinen durchsucht werden.
Wenn es ernsthaft Dein Anliegen ist alle robots auszusperren, solltest Du Deine robots.txt abwandeln:

# Ganze Site für alle Robots sperren
User-agent: *
Disallow: /

 

[ju_friedrich]

Hallo,
wenn Du das so machst wird Deine Seite überhaupt nicht mehr von irgendeinem Crawler durchsucht, d.h. Du wirst dann nicht mehr bei Google etc. gefunden !

Ich habe hier einen interessanten Hinweis gefunden:
http://media.libsyn.com/media/joomlajuice/Steve-Burge-Sample-Chapter-5.pdf.

Gruss Juergen :suspekt:;-)

http://www.it81.de