|
Hvor finder jeg software til crawling/opsamlig af informationer på nettet?
- 1
Hej jeg har arbejdet med den slags før, Perl og Python egner sig godt til den slags, de har begge moduler der kan tolke HTML, på den måde slipper man for at lave noget der baserer sig på regulære udtryk. |
Hvorfor ikke bare bruge et stykke open-source såsom Nutch? Der er crawler og HTML parser og det hele med i pakken - bare til "til at gå amok" med ;-)
|
it-arbejde.dk - specialister i middleware og server-side softwareudvikling, J2EE konsulent og Django.
Hej Simon Du kan afprøve denne web scraper gratis i 30 dage. Den er ret let at gå til, men har ikke kigget på den nærmere end at scape et enkelt site eller to. (med tilladelse endda! :-) Jeg ved ikke om den er i stand til sådan noget automatisk og løbende, som du sikkert får brug for. http://www.velocityscape.com/Products/WebScraperLite.aspx Hilsen Anders |
Nordic Key Account Manager hos Partner-Ads.com
Medstifter af Marketers.dk, det danske Affiliate Marketing Forum. Og ejer af Saugstrup.org, redaktionel linkbuilding.
Hvad er dine krav til sprog, platform osv? Hvis du selv kan kode er det rimeligt muligt du kan finde noget PHP / Perl libraries der kan bringe dig et stykke af vejen. Speciet hvis du kun har et begrænset antal af websites du skal crawle. |
Prøv vores nye produkt TechSEO360.com for Windows og Mac - og se vores teknisk SEO med TechSEO360 video på YouTube
Hej Thomas, Jeg kan ikke selv kode. Men du er velkommen til at smide mig en mail på sf@daicon.dk med dit nummer, og jeg kan ringe dig for en kort snak om hvordan du evt. kan hjælpe. Mvh Simon |