Er mit site lukket for registrering i Google?

Hej,

Jeg har netop ændret mit website fra almindelig html til wordpress.

For at sikre, at alle links er aktive, har jeg lavet et check på "validator.w3.org/checklink".

Jeg blev meget overrasket, da der i resultatet ved hvert link står:
"The link was not checked due to robots exclusion rules. Check the link manually, and see also the link checker documentation on robots exclusion."

Jeg har ikke en robots.txt fil liggende i roden på websitet, medmindre det ligger et andet sted.

Kan nogen tjekke, om mit website (budgethuset.dk) i virkeligheden forhindrer f.eks. Google i at indeksere mit website? 

Jeg har sikret at:
I wordpress under Under "Indstillinger" i "Privatliv-indstillinger", står der, at sitet skal være synligt for alle.

Mvh.
Philippe, Budgethuset.dk 

Synes jeg kan se i koden at du har google webmastertools koblet op på siden, så her kan du også se hvis der er nogle fejl med indeksering af sitet.

Hej Kristian,

Tak for svaret. Siden er dog først ændret fra html til wordpress i går (20/7 2011), så indekseringen den 15/7 er for de gamle sider.

Når man klikker på links i google, har jeg lavet 301 omdirigering, så de nye urls vises i stedet for de gamle.

Mener du stadigvæk, at jeg kan være rolig?

Mvh.

Philippe

Hej Jimmi,

Tak for svar.
Jeg har tjekket igen og den står rigtigt.

betyder:

User-agent: *
Disallow: 

ikke, at alt skal indekseres, hvilket er meningen? 

Ah jo... den *burde* være god nok ifølge standarden, når der ikke står noget efter Disallow:

Philippe:

Hej Jimmi,

Tak for svar.
Jeg har tjekket igen og den står rigtigt.

betyder:

User-agent: *
Disallow: 

ikke, at alt skal indekseres, hvilket er meningen? 

Man kan ikke bruge robots.txt til at beskytte mod indeksering, men til at fortælle søgemaskiner og crawlere at der er områder de ikke må crawle. Det er 2 forskellige ting. URL's kan sagtens blive indekseret selvom de ikke må crawles.

MVH Kim

Tak for hjælpen.

Jeg kan se, at Google allerede har indekseret nogle af de nye sider, så det må betyde, at det er, som det skal være.