Hov. Du er ikke logget ind.
DU SKAL VÆRE LOGGET IND, FOR AT INTERAGERE PÅ DENNE SIDE

Undgå søgemaskiner

Side 1 ud af 2 (15 indlæg)
Tilmeldt 20. Apr 05
Indlæg ialt: 125
Skrevet kl. 15:03
Hvor mange stjerner giver du? :
Hej,



Ja, jeg er godt klar over det er lidt den omvendte verden ift. de gængse SEO-debatter, men jeg er ved at lave en side for en ejerforening, hvor brugerne er en lukket skare af ejere. Siden skal derfor ikke kunne indekseres af søgemaskinerne, hvilket jeg søger en løsning på.



Jeg antager at svaret/noget af svaret ligger i robots.txt, men hvordan skal den præcist se ud, for holde botterne ude?



På forhånd tak.



Mvh



Claus Holm



Fra Århus
Tilmeldt 10. Feb 06
Indlæg ialt: 1415
Fra  Deskways ApS Heydesk ApS Skrevet kl. 15:06
Hvor mange stjerner giver du? :

Hvis du vælger at bruge robots.txt filen indsætter du koden


User-agent: *
Disallow: /



Hvis du alligevel beslutter dig for at lade den indeksere, men ikke alt, kan du sige hvilken mappe, søgerobotten skal holde sig fra med



User-agent: *
Disallow: /nixpille/


Håber det var svar nok :)


 


/Marcel Fuursted

Heydesk - kontorlokaler og mødelokaler over hele verdenen

Tilmeldt 20. Apr 05
Indlæg ialt: 125
Skrevet kl. 15:14
Hvor mange stjerner giver du? :
Takker!

 

Mvh

 

Claus Holm

Fra Lyngby
Tilmeldt 26. Mar 05
Indlæg ialt: 9731
Fra  DEMIB HOLDINGS ApS Waimea Digital Skrevet kl. 15:40
Hvor mange stjerner giver du? :
Der er forskel på crawling og indeksering! Robots.txt og META-robots "beskytter" kun mod crawling - ikke mod indeksering. Finder søgemaskinerne f.eks. links til bestemte sider på dit website - f.eks. forsiden, eller andre sider, vil de ofte indeksere disse, uden dog at crawle dem. Og på den måde kan de findes i søgemaskinerne.

 

Den eneste sikre måde at holde søgemaskinerne ude er "fysisk" at udelukke dem, enten ved at passwordbeskytte hele sitet, eller ved at identificere de besøgende robotter på agentnavn eller IP-adresse og så give dem en 403 - forbidden access.

Tilmeldt 20. Apr 05
Indlæg ialt: 125
Skrevet kl. 15:43
Hvor mange stjerner giver du? :
Tak til Mikkel også.



 



Sitet (baseret på Joomla CMS) er passwordbeskyttet på de afsnit der er uvedkommende for andre end ejerne, men Robots.txt var blot tiltænkt som en ekstra "sikkerhed".



 



Mvh



 



Claus Holm



Fra Lyngby
Tilmeldt 26. Mar 05
Indlæg ialt: 9731
Fra  DEMIB HOLDINGS ApS Waimea Digital Skrevet kl. 15:46
Hvor mange stjerner giver du? :
Hvis siderne er passwordbeskyttet yder det en langt bedre sikkerhed end robots.txt - så drop bare den. Det ville svare til at sætter et skilt op på et SUPER-SAFE pengeskab med teksten: Må ikke åbnes :)
Tilmeldt 20. Apr 05
Indlæg ialt: 125
Skrevet kl. 15:49
Hvor mange stjerner giver du? :
Dato: 5/28/2006 3:45:53 PM Forfatter: Mikkel deMib Hvis siderne er passwordbeskyttet yder det en langt bedre sikkerhed end robots.txt - så drop bare den. Det ville svare til at sætter et skilt op på et SUPER-SAFE pengeskab med teksten: Må ikke åbnes :)

 

Enig. Jeg har bare ikke tidligere arbejdet med denne type CMS, og var lidt usikker på om robotterne på nogen måde kunne komme igennem til de beskyttede sider.

 

Mvh

 

Claus Holm

Tilmeldt 14. Apr 06
Indlæg ialt: 192
Skrevet kl. 15:55
Hvor mange stjerner giver du? :
Dato: 5/28/2006 3:45:53 PM
Forfatter: Mikkel deMib
Hvis siderne er passwordbeskyttet yder det en langt bedre sikkerhed end robots.txt - så drop bare den. Det ville svare til at sætter et skilt op på et SUPER-SAFE pengeskab med teksten: Må ikke åbnes :)



Men der bør vel være en robots.txt - ikke?
Måske så kun med allow til ønskede sider?, og så p/w de udeladte, eller...?

Hilsen
FlemMing

Fra Lyngby
Tilmeldt 26. Mar 05
Indlæg ialt: 9731
Fra  DEMIB HOLDINGS ApS Waimea Digital Skrevet kl. 16:50
Hvor mange stjerner giver du? :
Nej, med mindre du vil udelukke søgemaskinerne fra at crawle dele af dit website er der ingen som helst grund til at have en robots.txt file
Fra Hvidovre, Danmark
Tilmeldt 12. Jan 06
Indlæg ialt: 403
Skrevet kl. 15:31
Hvor mange stjerner giver du? :
Dato: 5/28/2006 4:49:42 PM
Forfatter: Mikkel deMib
Nej, med mindre du vil udelukke søgemaskinerne fra at crawle dele af dit website er der ingen som helst grund til at have en robots.txt file


Ved at have en robots.txt undgår du at få en bunke hits "File not found" i din statistik da robotterne (i hvert fald de søde robotter) spørger efter filen når de kommer forbi.

Mvh, Lars Brink

Projekt: LatinoNews.dk events, koncerter m.v.

Side 1 ud af 2 (15 indlæg)