Just nu i M3-nätverket
Jump to content

robots.txt


satanica

Recommended Posts

Hoppas jag skriver i rätt forumsdel men jag skulle behöva hjälp vad man kan skriva/hur man skriver i robots.txt för att sökspindlarna ej ska hitta vissa kataloger. Har bla kataloger med gamla hemsidor jag vill ha kvar ett tag..

 

Link to comment
Share on other sites

Jag föreslår nog att du skriver så här

User-agent: *
Disallow: /gammalhemsida1/
Disallow: /gammalhemsida2/
Disallow: /gammalhemsida3/

Då förbjuder du katalogerna för samtliga sökmotorer. Sen kan man detaljstyra vilka sökmotorer som får hitta vilka kataloger om man vill.

 

Link to comment
Share on other sites

Archived

This topic is now archived and is closed to further replies.

×
×
  • Create New...