Crawler... kender du én?

Hej alle! 

Jeg håber, at I kan/vil hjælpe mig… er der mon nogen, der kender en crawler, som man kan bruge til at crawle et site – for at finde ud af hvilke sider, der hhv. indeholder og ikke indeholder en given string? 

Altså eksempelvis: Hvis jeg nu eksempelvis ville vide, hvilke sider på www.tv2.dk, der hhv. indeholder og ikke indeholder ”<A HREF” ét eller andet sted i koden...

Helt basalt går det ud på, at jeg skal skabe overblik over, hvilke sider på et relativt stort site, der har/ikke har tracking implementeret korrekt. 

Er der mon nogen, der kender en crawler, som kan hjælpe? 

På forhånd mange tak for hjælpen!

trymeOUT:

Hmm altså du kunne jo bare se på kildeteksten også kopire den over i Notepad?

- Emil

Tjoo... I princippet har du ret. Sagen er bare dén, at de pågældende sites er så store, at inden man er færdig med manuelt at crawle det igennem, så er det pågældende crawl forældet. Dertil kommer at et manuelt crawl vil være smækfyldt med den 'menneskelige fejl faktor'. Derfor skal det gøres automatisk af en computer, med jævne mellemrum.

Er der ingen, der har lavet et stykke software, som kan klare den opgave?

Ja der må jeg melde pas! Men forresten vil jeg lige takke dig for dine videoer de er utroligt gode!

Hej Lars

Vi har præcis det stykke software du efterspørger.

Du må gerne sende en mail på nb@binaryconstructors.dk hvis du er interesseret

Mvh

Niels