The invisible net - søgemaskiner

Hej Jesper

Personer der ikke arbejder med SEO til hverdag er da fuldstændigt ligeglade med at blive frekventeret med disse informationer om bot IP adresser, adfærdsmønstre mv. Det er til gengæld noget SEO folket som arbejder indenfor branchen kan bruge, og ja det er ikke kun cloakede sites der ryger på disse konti, og ja når vi bliver lukket ind på den lukkede afdeling( ja sådan kalder Christian det ) vil vi optage debatten her på det tekniske plan og selvfølgelig oplyse om de ting vi har analyseret – vi har ikke problemer med at hjælpe kollegaer i branchen, hvis der er nogle der mangler viden indenfor et specifikt område.

Men ligefrem smide logfilsanalyser byggende på mange, mange, mange timers analyser ud public er der vist ikke mange SEO virksomheder der vil gøre.

Med venlig hilsen

Wesecureit

René

Hej SEO kollegaer. 

Jeg vil i morgen skrive en beskrivelse af hændelsesforløb, måden iagttagelserne har fundet sted baggrunden for analysen og, hvorfor en log fil fra et websted pludselig blev genstand for en tværgående analyse på websites som vi har placeret på servere i flere lande i Europa og USA, splittet op på et utal af forskellige IP ranges – og hvor der opstop sammenfald af metoder som vi fandt underlige. Den bygger på logsfils materiale fra ca. 1.000 domæner som vi har kørt igennem et program til udvælgelse af data, der herved giver baggrund for materialet.

Jeg vil selvfølgelig samtidig ligge nogle eksempler ud på konkrete forespørgsler samt IP ranges ud som fortroligt materiale i det lukkede forum.

Det bliver kun publiceret i det lukkede forum.

Forsat god aften

Wesecureit

René

Mens vi venter på den fortsatte debat i det lukkede forum, vi afventer passwords mv. tager vi lige lidt almen info som alle kan være med på her. Jeg forbeholder mig retten til kun at diskutere helt specifikke ting sammen med kollegaer i branchen i lukkede fora.

Baggrunden for observationerne.

Vi har i mange år arbejdet med søgemaskineoptimering, den såkaldte Whitehat, Greyhat og Blackhat  - vi har i årerne fremstillet mange IP cloakede websites som erfaringsmæssigt aldrig er taget ud – Der har ligger domæner der har kørt i 4 – 5 år med mange besøgende dagligt ( Jeg personligt fremstillet over 2.000 af disse domæner inden for snart set alle industrier og til lande i hele Verden). I perioden op til september 2006 havde jeg ikke fået blacklistet et eneste domæne på Google nogensinde.

September 2006 begynder der at forsvinde nogle sites fra Googles index, vi beslutter os for at efterforske lidt i hvad der evt. kunne være grund til denne banning, hvis det var en teknisk detalje med en automatiseret proces, ville vi kunne omskrive den måde domænerne kørte på og tage højde for situationen – ved serverkodning efter brugerniveau. Efterforskningen blev også iværksat på domæner der kørte clean såkaldte Whvitehat domæner.

Samtidig hermed fulgte vi udviklingen på nettet på vores konkurrenter ( kollegaers arbejder ) – her havde vi ingen logfiler at gå efter, men kender metoderne der optimeres efter, med al respekt for deres arbejde  – og her begyndte sites også at forsvinde ( rejsebranchen, vvs branchen mv. - og ikke med et, men i et tempo som kunne indikere en manuel proces.

Vi fremstillede nu et program til fælles analyse af logfiler – samkøring af logs, ledende efter specielle data og valgte at tage ca. 1.000 logs ud til test af dette – disse domæner var ikke alle banned og nogle var Whitehat domæner, andre Gråzone domæner, andre igen Blackhat domæner.

Søgestrengene bærer præg af det er søgeord der er indtastet på Google, når der efterfølgende trykkes på linket og siden åbnes, går processen tilbage igen, og der indtastes nu den samme fra en firefox og eller forespørgsel med en ny agent og eksempler på Michosoft livesearch og andre robotnavne anvendes af Google IP erne - strenge som agenter bruger  *** se note 1. men normalt på respektive og egne IP ranges, derefter ses endvidere, at der foretages forespørgsler på Google på flere søgeord mv. På hvide domæner ses samme fremgangs måde – den er ikke kronologisk og forekommer ikke ens hver gang, nogle gange få processer, andre gange mange flere processer.  Hvide domæner, her gennemgås der tit også CSS og andre gange ikke.

Jeg har kørt logs igennem for 2 udenlandske firmaer der Cloaker meget, samt