Søgemaskineoptimering (SEO) hjælp & gode råd

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Gita Street — Fri, 24 Feb 2017 00:10:27 GMT

Interessant diskussion blandt nogle af de mest teknisk kompetente indenfor SEO jeg kender til .

Hvis jeg laver en ny installation af WordPress og selvfølgelig vælger at den helst ikke skal findes i søgemaskine - før jeg er klar, så laver WordPress en virtuel robots.txt fil med en disallow: *.

Denne gør at "noindex" bliver ignoreret.

Det har jeg set flere gange. Her er mit nyeste eksempel. Google indekserer så denne ligegyldighed:

Det er så nok ikke Duplicate Content, da den kun har indekseret ligegyldige title tags og ikke indholdet - og jeg vil endda mene at den ignorerer et 301 redirect her.

For en ny installation af WordPress, så sørger jeg for at override den virtuelle robots.txt-fil, så den enten er tom, tillader alt eller er slettet. Så overholder Google (indtil videre) den noindex. I hvert fald for nye installationer.

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Mikkel deMib Svendsen — Tue, 07 Feb 2017 08:29:39 GMT

Thomas Frost:
I mange tilfælde vil robots.txt rent faktisk virke efter hensigten, men problemet er at det ikke er en garanti. Bruger man derimod det korrekte "NoIndex" så kan man være sikker på Google ikke indekserer en given side.

Det er så heller ikke helt korrekt :-)

Robots.txt virker langt oftere efter hensigten end META-data generelt gør.

Hensigten med robots.txt er, som du også selv påpeger, ikke at forhindre indeksering, men derimod at styre hvilke filer og kataloger robotter ikke skal have adgang til at crawle. Og det virker. I hvert fald i forhold til de robotter, der respekterer robots.txt, hvilket Google og alle andre større søgemaskiner gør. Robots.txt er en langt mere solid og driftssikker metode end META-data.

Problemet med META-data er, at det skal læses og fortolkes på hver enkel side for at virke. Der er mange ting der kan gå galt. Og det sker desværre tit. Dette gælder langt fra blot i forhold til META-robots data.

Med robots.txt kan du styre hvor søgemaskinernes crawling resurser skal bruges. Har du et stort site, med en masse sider du ikke vil have med i søgemaskinerne, risikerer du, at søgemaskinerne spilder tid på at crawle indhold, du alligevel ikke vil have med, og ikke får tid til at crawle det du faktisk gerne vil have med, hvis du i stedet for benytter META-data.

HUSK også, at de to standarder ikke kan bruges på samme tid for de samme sider. Hvis du udelukker en side fra crawling kan META-data jo ikke læses.

Så, det er desværre langt fra så enkelt som man skulle tro :-)

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Thomas Frost — Tue, 07 Feb 2017 08:10:08 GMT

Hej Patrick, svaret er stadig det samme som tidligere, nemlig at man skal bruge meta tag NoIndex, for de sidder man ikke ønsker indekseret.

I mange tilfælde vil robots.txt rent faktisk virke efter hensigten, men problemet er at det ikke er en garanti. Bruger man derimod det korrekte "NoIndex" så kan man være sikker på Google ikke indekserer en given side.

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Patrick Kronholm — Mon, 06 Feb 2017 17:04:47 GMT

jeg synes det var en lidt hård tone, da jeg kun forsøgte at hjælpe, jeg brugte selv robots.txt og disallow på mine hjemmesider. Jeg er nu begyndt at bruge noindex dog stadig i robots.txt, hvad er jeres feedback på dette? Skal det virkelig kodes på alle sider eller virker robots.txt fint?

Denne artikel fra seobooks skriver at googlebot forstår det, men ikke noget om de andre søgemaskine bots: http://tools.seobook.com/robots-txt/

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Betty Jewett — Fri, 30 Sep 2016 07:31:13 GMT

Gennemgang er den proces, hvor Googlebot går rundt fra website til website, finde nye og opdaterede oplysninger til at rapportere tilbage til Google.

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Swingcar.dk — Mon, 15 Dec 2014 16:14:09 GMT

Bent:

Hej igen

Mange tak for alle de gode svar! TAK!

Men så opstår der et nyt spørgsmål, hvordan løser jeg denne opgave nemmest i Magento, Kender ikke lige navnet på alle "faste" i Magento?

Findes der et modul eller er der et kryds jeg mangle at få sat ?

På forhånd tak!

Og endnu en tak for jeres gode svar

Et forslag kunne være noget som dette: http://www.magentocommerce.com/magento-connect/creare-seo.html

Det ta'r nogen af de vigtige som - søge, filtret, flere sider osv. - med et NOINDEX,FOLLOW tag.

Det har du ikke i dag, noget som du brændende vil ønske dig!

Overvej at få kigget på din søgefunktion. Jeg har søgt efter en 5-6 ting du har i shoppen, men den finder intet! De tomme søgeresultater har endvidere et: INDEX,FOLLOW tag.

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Bent — Sun, 14 Dec 2014 13:08:47 GMT

Hej igen

Mange tak for alle de gode svar! TAK!

Men så opstår der et nyt spørgsmål, hvordan løser jeg denne opgave nemmest i Magento, Kender ikke lige navnet på alle "faste" i Magento?

Findes der et modul eller er der et kryds jeg mangle at få sat ?

På forhånd tak!

Og endnu en tak for jeres gode svar

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Thomas Frost — Sun, 14 Dec 2014 12:51:06 GMT

Casper Schneidereit:
Jeg kan se, at Patrick ikke var helt enig med mig.

Man skal vist ikke lytte til hvad Patrick siger om SEO :-)

NoIndex er naturligvis helt korrekt.

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Gita Street — Sun, 14 Dec 2014 12:38:25 GMT

Der skal noindex på, men ikke nofollow.

Svaret er derfor: noindex,follow

Hvis du bruger noindex,nofollow betyder det at også dine interne links på siden er nofollow, og det vil du ikke have, da det er et tegn på at du ikke stoler på det du linker til. Derfor skal der aldrig noindex,nofollow på siden, medmindre du helt vil have udelukket hele sitet fra Google.

Der skal så ikke være noget i robots.txt-filen om at disallow, da du når du beder Google om ikke at crawle siden, så ser den ikke eller retter sig ikke efter at du bar bedt om en ikke at indeksere den med noindeks..

Da du bruger Magento er der sikkert et SEO-addon til at få de meta informationer på.

Husk dog at du ikke vil have noindex,follow på fordi siden er "fast" men snarere "tynd" fordi den reelt ikke har noget indhold eller er en genbrugstekst.

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Anonymous — Sun, 14 Dec 2014 12:25:03 GMT

Men er det så smart, med henblik på SEO, at lave sådan en no-index eller robot.txt fil på ens faste sider som trådstarter omtaler, altså indkøbskurv, betalingsside osv?

Hilsen Simon

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Internexus — Sun, 14 Dec 2014 12:15:27 GMT

Casper har fuldkommen ret. Noindex er den helt rigtige metode. Står du i kæmpe problemer, og kan ikke bruge noindex, pga et låst cms system, så kan du godt bruge robots.txt. Men du kan risikere at de bliver indekseret.

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Casper Schneidereit — Sun, 14 Dec 2014 12:06:02 GMT

Jeg kan se, at Patrick ikke var helt enig med mig.

https://support.google.com/webmasters/answer/93710?hl=en

robots.txt regulerer crawling, men ikke indeksering.

men alligevel er URL'en med i index.

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Casper Schneidereit — Sat, 13 Dec 2014 20:55:23 GMT

Stop. Robots.txt beskytter ikke mod indeksering. Du skal lade Google læse dine sider, og på de sider der ikke skal indekseres, skal du netop fortælle dette. Det nemmeste, i dit tilfælde, er sandsynligvis at benytte følgende meta-tag:

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Patrick Kronholm — Sat, 13 Dec 2014 20:12:12 GMT

Robot.txt er den eneste rigtige metode.
Du kan læse lidt mere om den her: http://www.magentocommerce.com/knowledge-base/entry/setting-up-a-robotstxt-file

Hvis du skal bruge inspiration til hvad der skal stå i den, kan du se listen her: http://inchoo.net/ecommerce/ultimate-magento-robots-txt-file-examples/

Med venlig hilsen
Patrick Kronholm

Svar: Seo - hvordan undgår jeg google indexere faste sider?

Bent — Sat, 13 Dec 2014 19:01:38 GMT

Tak

Der findes ikke en nemmer måde? Måske et modul eller et sted der skal krydse af i magento?

Skal jeg så til at finde alle de web adresser Google ikke må kigge på ?