Jeg har ikke tidligere været ude for, at kunne finde et af mine sites' robots.txt i Google's indeks - det er ikke desto mindre tilfældet her til formiddag:
Ikke nok med at Google viser robots.txt-filen i indekset, der findes også en cache-udgave:
Der er sikkert tale om en fejl, men jeg undrer mig dog lidt over, hvordan Google kan finde på at indeksere en - for brugerne - ubetydelig tekstfil som robots.txt jo er.
Jeg har ikke linket til min robots.txt, og kan ikke forestille mig at andre vil kunne finde på det.
Endnu mere underligt er det med en indeksering som denne:
Ja, den ser lidt underlig ud. Kan det være et link på din hjemmeside, der indeholder en fejl? - læg mærke til URL'en: (www.ktj-media.dk - bemærk parantesen foran.
Endnu mere underligt er det med en indeksering som denne:
Ja, den ser lidt underlig ud. Kan det være et link på din hjemmeside, der indeholder en fejl? - læg mærke til URL'en: (www.ktj-media.dk - bemærk parantesen foran.
Nej der er ingen links på min hjemmeside der ser ud sådan, det kan ikke lade sig gøre i min løsning nemlig. men der er nok nogen som på et tidspunkt har linket forkert, og det er nok årsagen.
Og ja det var jo netop på grund af parentesen at det undre mig helt vildt at Google overhovedet indeksere en sådan side, altså jeg mener, det er jo ikke muligt at se noget indhold når man trykker på resultatet, browseren melder ligefrem fejl.
og der er hverken noget preview eller cache hos Google. Så det undre mig rigtig meget med en sådan side overhovedet kan blive indekseret, for det er jo et ulovligt link/domæne hvis man kan sige det sådan.
Det må være en algoritme-bøf fra Google's side af, at den overhovedet er kommet med i indekset - eller måske har en Google-medarbejder (med 10 tommelfingre) været inde over ifb. med en manuel redigering et sted i systemet.
Det ligner i hvert fald en "fejl 40" (at nogen har tastet Shift + 8 i stedet for Shift + 7 under en indtastning).
Jeg oplever i øvrigt at der sker lidt besynderlige ting med Google for tiden. Google Webmaster Tools har de sidste par dage eksempelvis meldt at URL'en "/sitemap.xml" ikke blev fundet - nej, det kan jeg godt forstå, for den har aldrig eksisteret...
Det må være en algoritme-bøf fra Google's side af, at den overhovedet er kommet med i indekset - eller måske har en Google-medarbejder (med 10 tommelfingre) været inde over ifb. med en manuel redigering et sted i systemet.
Det ligner i hvert fald en "fejl 40" (at nogen har tastet Shift + 8 i stedet for Shift + 7 under en indtastning).
Har fejl-indekseringen været der længe?
Ja noget af en bøf og lave, ja den har været der i over 1 år så vidt jeg husker. og man kan jo ikke engang anmode om sletning via webmastertools på en sådan fejl :)
Men det viser da uden tvivl at Google kan lave fejl som alle andre :)
Jeg kan se, at både /robots.txt og /sitemap.xml nævnes på den tilsvarende side for Webhotel-Tjek (woorank.com har tilmed sat "v" ud for, at der eksisterer en /sitemap.xml - hvilket, der ikke gør).
Det må være årsagen til at min robots.txt er blevet indekseret.
Dernæst er det samtidigt en bekræftelse af tidligere forlydender om, at Google nu også tillægger "skrevne URL'er" (links, som ikke er HTML-links) en værdi :o)