Robots.txt på wordpressblog er = User-agent: * Disallow:

Fra København S

Tilmeldt 1. Feb 06

Indlæg ialt: 3533

Kim Tetzlaff - Kim Tetzlaff ApS Fra Kim Tetzlaff ApS Kim Tetzlaff Ejendom Skrevet 13-11-2011 kl. 17:03

Hvor mange stjerner giver du? :

marjoe:

Øhh, nu har jeg lige hørt en anden forklaring:

Disallow: betyder at google indekserer alle sider, da der ikke er nogen tekst efter kolon? er dette rigtig, for så har jeg da taget fejl-

Ja det er korrekt, i grunden kan man sige at det er en robots.txt med fejl i. en fejl som Google også godt kan tage fejl af. altså jeg mener man fortæller jo noget skal Disallow'es, men man undlader bare at fortælle hvad.

Derfor er det altid bedst enten at slette indholdet af robots.txt eller skrive allow: /

Man kan lige så godt have filen på serveren, da Google uanset om den er der eller ikke kigger efter den før de crawler en hjemmeside.

MVH Kim

Kim Tetzlaff

🚀 Hastighedsekspert ⚙️WordPress hjemmesider 🎯SEO
Siden 1995 - hjemmeside Udvikling og teknisk optimering af hjemmesider
👉 Mere om mig