Hvordan hindre indexering av delar av nettstedet

[PelleP]

Jeg er kjent med at man kan forhindre søkemotorer i å søke på og indexere enkeltsider, eller alle siderne under en server. Finnes det en måte å hindre søking på kun en del av webområdet.

Endret 14. juni 2008 av PelleP

[Runar]

Du kan lage en robots.txt fil og be roboter ikke indeksere visse mapper og filer. Et eksempel kunne vært:

 

User-agent: *
Disallow: /secret-folder
Disallow: /epic.html
Disallow: *.gif

[PelleP]

Du kan lage en robots.txt fil og be roboter ikke indeksere visse mapper og filer. Et eksempel kunne vært:

 

User-agent: *
Disallow: /secret-folder
Disallow: /epic.html
Disallow: *.gif

Flott, da må jeg bare prøve å få lagt inn en robots.txt i riktig mappe!

[Runar]

Legg robots.txt filen i rootmappen din, og skriv f.eks. Disallow: /mappe1/mappe2/mappe3/bildetmitt.jpg. Robots.txt filen må ligge i root, som det står på siden jeg linket til .

[demilio]

du kan også sjekke ut google sitt verktøy for nettredaktører. Nyttig informasjon. Der får du hjelp med det meste rundt dette med å stenge adresser for nettsøk.

 

https://www.google.com/webmasters/tools/docs/no/about.html

[PelleP]

du kan også sjekke ut google sitt verktøy for nettredaktører. Nyttig informasjon. Der får du hjelp med det meste rundt dette med å stenge adresser for nettsøk.

 

https://www.google.com/webmasters/tools/docs/no/about.html

Ja, ved hjelp av Googles verktøy for nettredaktører kan man faktisk få fjernet indeksen etter at selve siden er fjernet fra weben. Det er glimrende! Hvorfor har ikke Yahoo og Lycos tilsvarende?