Hej Aminoer. Jeg sidder lige og kigger på nogle forskellige Robots.txt filer og kunne egentlig godt tænke mig at vide hvad de alle betyder. Jeg kender de basale, men der findes jo rigtig mange! - Findes der ikke en "manual" et sted på nettet, hvor man kan se hvad de allesammen betyder? eks. aner jeg ikke hvad /webvars er.
Side nr. 1 User-agent: * Disallow: /administrator/ Disallow: /cache/ Disallow: /components/ Disallow: /images/ Disallow: /includes/ Disallow: /installation/ Disallow: /language/ Disallow: /libraries/ Disallow: /media/ Disallow: /modules/ Disallow: /plugins/ Disallow: /templates/ Disallow: /tmp/ Disallow: /xmlrpc/ |
Der er et hav af informationer at hente lige her.
Og en enkelt artikel fra min blog her: Robots.txt
God læselyst!