A volte capita di avere un URL per l'istanza Zope, es:

http://istanzazope.urlsito.com/

all'interno di quello Zope ho un sito Plone:

http://istanzazope.urlsito.com/Plone

Però al pubblico quel sito Plone viene mostrato con l'URL:

http://www.urlsito.com/

Ciò può essere dannoso per l'indicizzazione, in quanto i motori di ricerca non apprezzano quando raggiungi gli stessi contenuti con due indirizzi diversi in quanto sospettano un tentativo di frode.

Per evitare ciò è sufficiente mettere nella radice dell'istanza Zope un file di nome robots.txt con questo contenuto:

User-agent: *
Disallow: /

In questo modo il motore di ricerca ignorerà l'URL dell'istanza Zope.

Però per evitare che anche l'url pubblico sparisca da internet è fondamentale creare anche nell'istanza Plone il file robots.txt, ma con questo contenuto:

User-agent: *