Robots.txt

Tilmeldt 10. Nov 16

Indlæg ialt: 4

Jeanette123 Skrevet 10-11-2016 kl. 20:32

Hvor mange stjerner giver du? :

Hejsa

Kan nogen hjælpe mig i forhold til når jeg checker en given webshops hjemmeside med robots.txt.

Bør der på noget tidspunkt være disallows? Eks: admin, cart, orders, checkout, blogs......

Eller burde den altid være ren og alle disallows slettet?

Jeg oplever ofte at ovenstående ord er disallows i webshops robots.txt.....men ved ikke om det er fordi hjemmesiden evt er bygget i en ikke SEO venlilg platform, eller om det er helt bevidst.

Håber nogen kan rådgive.

På forhånd tak for svar.

Mvh Jeanette

Fra Lyngby

Tilmeldt 26. Mar 05

Indlæg ialt: 9714

Mikkel deMib Svendsen Fra DEMIB HOLDINGS ApS Waimea Digital Skrevet 10-11-2016 kl. 20:53

Hvor mange stjerner giver du? :

Ja, du bør udelukke i hvert fald:

1) Tynde sider (siden uden nok originalt indhold)

2) Produktvarianter (sider med samme indhold, men bare i varianter)

3) Duplicate Content sider

4) Sider i et forløb, som kræver man har set andre sider først (f.eks. check out sider)

5) Alle andre sider, der ikke egner sig som landing sider

Og alt efter sitet kan der være mere

Tilmeldt 10. Nov 16

Indlæg ialt: 4

Jeanette123 Skrevet 10-11-2016 kl. 20:58

Hvor mange stjerner giver du? :

Hej Mikkel

Tusind tak!!

Meget præcist og let forståeligt - dejligt.

Præcis hvad jeg havde brug for at høre.

Mange hilsner

Jeanette

Fra Risskov

Tilmeldt 4. Nov 16

Indlæg ialt: 83

Claus Jørgensen Fra 360 Marketing Skrevet 13-11-2016 kl. 10:38

Hvor mange stjerner giver du? :

Nu ved jeg ikke hvilket shop system du bruger, men det er meget normalt at systemerne selv har lavet en basic opsætning af robots.txt, hvor admin/cart/checkout osv er disallowed. Smile

Men "Blog" burde ikke være det. Det samme med produkt varianter. Dem klarer du med canonical tags.

https://boligraad.dk/

Fra Lyngby

Tilmeldt 26. Mar 05

Indlæg ialt: 9714

Mikkel deMib Svendsen Fra DEMIB HOLDINGS ApS Waimea Digital Skrevet 13-11-2016 kl. 10:43

Hvor mange stjerner giver du? :

Claus Jørgensen:
Det samme med produkt varianter. Dem klarer du med canonical tags.

CANONICAL-tags er ikke en sikker metode. Google fejler af og til i læsningen af disse. Det er derfor absolut sidste mulighed. Det er altid bedre at klare tingene på serversiden, da det kun er på den måde du kan sikre dig mod læsnings- og fortolkningsfejl.