Hjælp til salg (Ikke internet)

Svar: Robots.txt og indexsering af billeder

Dennis S. L. Jørgensen — Thu, 19 Apr 2018 06:22:32 GMT

Der er lidt mere kød på den historie, for robots.txt handler om crawl - hvad Google og andre bots må crawle. Den handler ikke om hvad de ikke må indeksere. Hertil findes meta koden robots, og x-robots header response som kan sættes til "noindex".

Så du kan ikke være sikker på at Google m.fl. ikke gætter på indholdet af det der er listet i robots.txt, men for det meste indexeres med tekster pålydende noget a la "dette resultat kan ikke vises ... pga. robots.txt"

Når du i øvrigt bruger robots.txt, så vil jeg anbefale at du disallow'er hele mapper, og ikke enkelte filer. Ellers er det jo en opskrift på alle de filer/billeder/sider du ikke vil have fundet.

Svar: Robots.txt og indexsering af billeder

TheEdge — Wed, 18 Apr 2018 20:48:15 GMT

Mange tak for det :-)

Svar: Robots.txt og indexsering af billeder

Rami Najmi — Fri, 06 Apr 2018 06:30:21 GMT

Hej Michael,

Ja det er korrekt :-)

Disallow fortæller nemlig robotten at, den ikke skal besøge de sider/billeder.

Robots.txt og indexsering af billeder

TheEdge — Thu, 05 Apr 2018 20:31:10 GMT

Hejsa.

Jeg arbejder med et Wordpress tema som har en del default demo billeder. Jeg vil egentligt gerne gemme dem, så jeg stadigvæk har mulighed for at se demo siderne med billeder.

Men jeg har ikke så meget lyst til at Google indexserer de billeder, fordi de ikke relaterer overhovedet til de produkter vi sælger. Er det korrekt at Google ikke indexserer billederne hvis jeg tilføjer dette i min robots.txt, og de bliver dermed ikke vist i Google billedesøgning:

User-agent: Googlebot-Image Disallow: /images/demo-graphic/ Disallow: /images/demo-pictures/

Vh Michael.