Søgemaskineoptimering (SEO) hjælp & gode råd

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Nikolaj Mogensen — Sat, 14 Aug 2010 05:45:36 GMT

Nu har jeg endelig fået lagt Robots.txt filen op - så må vi se hvad der sker.

Siger i hvert fald mange tak for hjælpen!

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Kim Tetzlaff - Kim Tetzlaff ApS — Wed, 04 Aug 2010 09:07:51 GMT

Nikolaj Mogensen:
Arr jamen så var svaret der jo - men burde der så ikke stå noget i SEO-LEX 11 om hvad man gør når skaden er sket?

jo det burde der nok, jeg ved ikke om der allerede gør, da jeg ikke har læst hans bog.

Men det er egentlig meget enkelt når det kommer til stykket.

MVH Kim

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Kim Tetzlaff - Kim Tetzlaff ApS — Wed, 04 Aug 2010 09:02:23 GMT

Nikolaj Mogensen:

Men dvs man jo som udgangspunkt skal have sin robots.txt fil opdateret ved hver eneste nye side med DC på ens website. Man skal altså med andre ord ha' lavet den FØR googlebotten kommer forbi.

Nikolaj Mogensen:
Okay så man skal altså uploade robotsfilen inden man begynde at fjere de sidder der ikke skal være indekserede?

Ja robots.txt skal være klar på serveren før du påbegnder at fjerne sider via webmaster tools. og den skal indholde alle de sider som du vil fjerne, samt nyligt oprettede sider som ikke skal crawles.

Nikolaj Mogensen:
Synes egentlig ærlig talt det er noget farligt bøvl med det DC burde google altså kunne gøre noget smartere og bedre! Det er vel meget naturligt at et produkt kan have flere farver og at der derved skabes DC.

Ja det er meget normalt med flere farver, størrelser etc. Men problemet er at hver farve kun skal have hver sin side/url hvis den reelt har en unik beskrivelse, og det er jo sjældent tilfældet. problemet er så der at rigtig mange shopløsninger inklusiv dandomain, håndterer det med farver, størrelser meget dårligt, og det kan man jo ikke gøre noget ved andet end at fortælle programmørerne at de burde gøre det anderledes.

Men Google kan ikke gøre det så meget anderledes, da duplikeret indhold jo er duplikeret indhold om så det er på en shop eller på en anden hjemmeside. Det handler bare om at lave shoppen, hjemmesiden rigtigt fra starten af, så opstår problemet ikke.

MVH Kim

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Nikolaj Mogensen — Wed, 04 Aug 2010 08:56:36 GMT

KTJ-Media.dk:
Han skriver kun om robots.txt fordi det er det eneste man kan gøre med en dandomain shop :)

Arr jamen så var svaret der jo - men burde der så ikke stå noget i SEO-LEX 11 om hvad man gør når skaden er sket?

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Kim Tetzlaff - Kim Tetzlaff ApS — Wed, 04 Aug 2010 08:53:18 GMT

Nikolaj Mogensen:

Sidder med Rosenstands SEO tunning til dandomain samt SEO lex, og her nævner han 'vidst nok' ikke noget om problematikken. Faktisk skriver han heller ikke noget om det med meta, kun brug af robots.txt

Han skriver kun om robots.txt fordi det er det eneste man kan gøre med en dandomain shop :)

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Nikolaj Mogensen — Wed, 04 Aug 2010 08:50:13 GMT

KTJ-Media.dk:

Nikolaj Mogensen:
'Desværre' er shoppen i Dandomain så tvivler på jeg har muligheden.
Mener faktisk jeg har læst og hørt at den eneste mulighed i den type shop er robots.txt. Den er ikke optimal, men den klare noget af arbejdet. Det er vidst Thomas Rosenstand som har skrevet om problematikken med Dandomain shops.

Sidder med Rosenstands SEO tunning til dandomain samt SEO lex, og her nævner han 'vidst nok' ikke noget om problematikken. Faktisk skriver han heller ikke noget om det med meta, kun brug af robots.txt

Men skal da ikke afskrive, at der kan være lidt huller i min hukommelse samt at der evt står noget andet et andet sted.

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Nikolaj Mogensen — Wed, 04 Aug 2010 08:48:13 GMT

KTJ-Media.dk:
Der er delte meninger om dette emne, Jeg har oplevet at Google har fjernet resultater fra Google hvis jeg skrev det i Robots.txt, Men reelt set blokerer man kun for at Google skal Crawle siden. Det er ikke helt det samme som indekserer siden.

Men dvs man jo som udgangspunkt skal have sin robots.txt fil opdateret ved hver eneste nye side med DC på ens website. Man skal altså med andre ord ha' lavet den FØR googlebotten kommer forbi.

KTJ-Media.dk:
Problemet er at der er nogle regler som skal være opfyldt før du kan gå ind i webmaster tools og fjerne urlerne. og ja der er det at man skriver det ind i robots.txt også en af reglerne.

Okay så man skal altså uploade robotsfilen inden man begynde at fjere de sidder der ikke skal være indekserede?

KTJ-Media.dk:
Men problemet kommer der at du så skal indskrive i robots.txt hver gang du opretter et produkt.

Synes egentlig ærlig talt det er noget farligt bøvl med det DC burde google altså kunne gøre noget smartere og bedre! Det er vel meget naturligt at et produkt kan have flere farver og at der derved skabes DC.

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Kim Tetzlaff - Kim Tetzlaff ApS — Wed, 04 Aug 2010 08:40:20 GMT

Nikolaj Mogensen:
'Desværre' er shoppen i Dandomain så tvivler på jeg har muligheden.

Mener faktisk jeg har læst og hørt at den eneste mulighed i den type shop er robots.txt. Den er ikke optimal, men den klare noget af arbejdet. Det er vidst Thomas Rosenstand som har skrevet om problematikken med Dandomain shops.

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Kim Tetzlaff - Kim Tetzlaff ApS — Wed, 04 Aug 2010 08:30:36 GMT

Nikolaj Mogensen:

'Desværre' er shoppen i Dandomain så tvivler på jeg har muligheden.

Nej så har du nok ikke muligheden

Nikolaj Mogensen:

Der står "You can use a special HTML <META> tag to tell robots not to index the content of a page, and/or not scan it for links to follow." - Er det netop ikke hvad man gør med robots.txt.

Der er delte meninger om dette emne, Jeg har oplevet at Google har fjernet resultater fra Google hvis jeg skrev det i Robots.txt, Men reelt set blokerer man kun for at Google skal Crawle siden. Det er ikke helt det samme som indekserer siden.

Nikolaj Mogensen:
Giver det ikke det samme hvis jeg i webmastertools fjerne de URL der giver DC og så derefter uploader robots.txt?

Problemet er at der er nogle regler som skal være opfyldt før du kan gå ind i webmaster tools og fjerne urlerne. og ja der er det at man skriver det ind i robots.txt også en af reglerne. Men problemet kommer der at du så skal indskrive i robots.txt hver gang du opretter et produkt. og det blokerer jo ikke for indeksering, men det blokerer for crawling.
Man kan så diskuterer om det så skaber DC, for den ser jo ikke indholdet på siden uden at crawle den, og det er jo indhold som skaber DC.

MVH Kim

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Nikolaj Mogensen — Wed, 04 Aug 2010 08:19:15 GMT

KTJ-Media.dk:
Har du selv programmeret siden kan du læse mere om tagget her: http://www.robotstxt.org/meta.html

'Desværre' er shoppen i Dandomain så tvivler på jeg har muligheden.

Der står "You can use a special HTML <META> tag to tell robots not to index the content of a page, and/or not scan it for links to follow." - Er det netop ikke hvad man gør med robots.txt.

Giver det ikke det samme hvis jeg i webmastertools fjerne de URL der giver DC og så derefter uploader robots.txt?

Endnu en gang må jeg sige tusind tak for dine svar - det hjælper super meget

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Kim Tetzlaff - Kim Tetzlaff ApS — Wed, 04 Aug 2010 08:07:42 GMT

Nikolaj Mogensen:

Okay? den har jeg aldrig hørt om før. Hvor finder man information om den henne?

Har du selv programmeret siden kan du læse mere om tagget her: http://www.robotstxt.org/meta.html du skal dog være opmærksom på at hvis du har lavet siden i XHTML, skal koden være med små bogstaver.

Har du ikke selv gjort det, bør der være en mulighed for at du kan vælge det i selve systemet, hvis dem der har lavet systemet da har tænkt på det.

Nikolaj Mogensen:
Er det under site configuration -> crawler access -> remove url?

Ja det er der.

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Nikolaj Mogensen — Wed, 04 Aug 2010 07:58:00 GMT

Tak for svar Kim!

KTJ-Media.dk:
Det er ikke helt den rigtige måde at gøre det på. Da dine dublikerede sider er indekseret af Google, er det nødvendigt at bruge noindex meta-robots tagget i stedet for. Da Google ikke vil fjerne siden bare ved at den bliver udelukket i Robots.txt.

Okay? den har jeg aldrig hørt om før. Hvor finder man information om den henne?

KTJ-Media.dk:
Yderligere kan du med de sider som er indekseret fortælle Google via Webmaster Tools at siderne skal fjernes fra deres index.

Er det under site configuration -> crawler access -> remove url?

Og hvis det er tilfældet så ligger der et stort arbejde foran mig til resten af dagen - 170 sider kan vel godt tage sin tid.

Svar: Duplicate Content - råd til udelukkelse af 167 sider

Kim Tetzlaff - Kim Tetzlaff ApS — Tue, 03 Aug 2010 21:47:44 GMT

Hey

Det er ikke helt den rigtige måde at gøre det på. Da dine dublikerede sider er indekseret af Google, er det nødvendigt at bruge noindex meta-robots tagget i stedet for. Da Google ikke vil fjerne siden bare ved at den bliver udelukket i Robots.txt.

Yderligere kan du med de sider som er indekseret fortælle Google via Webmaster Tools at siderne skal fjernes fra deres index.

Duplicate Content er skadeligt i den forstand at du tvinger Google til at vise 1 af de dublikerede sider, og det er ikke sikkert de vælger rigtigt. Og samtidig har jeg oplevet i de tests jeg har lavet at et resultat er røget længere ned på Google, udelukkende pga DC.

Så ja man kan sige at det er skadeligt

MVH Kim

Duplicate Content - råd til udelukkelse af 167 sider

Nikolaj Mogensen — Tue, 03 Aug 2010 21:27:42 GMT

Hej Aminoer

Inden jeg smider min robots.txt fil op vil jeg lige 100 % sikre mig at det er der rigtige jeg gør.

Har udelukket alle produkter med samme tekst, hvor kun farven på smykkerne er skiftet ud.

Et eksempel er disse ørestikker fra Liebwald

Jeg har altså læst mig frem til at jeg skal udelukke alle de andre farver pånær variantmasteren, og det har jeg så gjort i robots.txt, men er det nu også det rigtige at gøre?

Selvom det laver DC så er det vel stadig indekserede sider - og skader det virkeligt?

På forhånd tak - tror måske godt jeg kender svaret men kunne nu godt tænke mig lige at få det sidste spark bagi!