Nogen med forstand på webcrawlere?

Tilmeldt 8. Apr 15

Indlæg ialt: 4

Niels2k Skrevet 08-04-2015 kl. 19:40

Hvor mange stjerner giver du? :

Hej med jer!

Jeg kunne godt tænke mig at lave en webcrawler, der kan tage en liste URL'er fra en CSV fil, køre dem igennem whatcms.org og gemme resultaterne som et regneark ark eller CSV fil. Jeg er helt på bar bund.

Er der nogen, der har et forslag til, hvordan jeg kommer igang med det?

Mvh. Niels

Tilmeldt 20. Apr 07

Indlæg ialt: 16014

Slettet bruger Skrevet 08-04-2015 kl. 19:48

Hvor mange stjerner giver du? :

smid mig en mail på carlemil.bager@gmail.com og jeg kan prøve at hjælpe dig

Tilmeldt 2. Feb 15

Indlæg ialt: 29

Konas Skrevet 08-04-2015 kl. 20:11

Hvor mange stjerner giver du? :

Jeg ville vælge at læse programming collective intelligence den skriver meget om web crawlere

Tilmeldt 22. Jun 13

Indlæg ialt: 285

webfreelanceren Skrevet 08-04-2015 kl. 20:38

Hvor mange stjerner giver du? :

Jeg har god erfaring med at lave disse webcrawlere, og har adskillige af slagsen bag mig. Kontakt mig gerne via en privat besked her på siden, da jeg ikke kan skrive til dig.

Tilmeldt 22. Jun 13

Indlæg ialt: 285

webfreelanceren Skrevet 08-04-2015 kl. 20:45

Hvor mange stjerner giver du? :

I princippet skal du blot kigge på CURL og så lave en forespørgsel til url'en herunder, samt parse indholdet:
http://whatcms.org/?s=www.dinurl.dk

Husk dog også det juridiske. Den rigtige måde er altid at tage
kontakt til ejeren af hjemmesiden via f.eks. en e-mail, og høre om det er i orden at
du anvender deres service - eventuelt for et mindre beløb. Specielt hvis der er tale
om mange url'er og et regelmæssigt brug.

Tilmeldt 18. Nov 14

Indlæg ialt: 201

NetKongen Fra Billig-Webhosting.dk Skrevet 08-04-2015 kl. 23:03

Hvor mange stjerner giver du? :

Ved ikke meget om crawlere, men ved at du på elance kan få lavet en crawler af en inder for bare 5-10 dollar ;-)

Hjælp til webhoteller og rabatkoder til hosting: Billig Webhosting

Tilmeldt 22. Jun 13

Indlæg ialt: 285

webfreelanceren Skrevet 15-04-2015 kl. 23:19

Hvor mange stjerner giver du? :

Er du kommet videre? Ellers så skriv gerne en privat besked herinde, så skal jeg nok hjælpe dig