✔ Webcrawler in PhP Programmieren?

[m0dpad]

Du kannst ja auch mal einen existierenden Crawler ansehen, dann hast du die Idee.
http://phpcrawl.cuab.de/ ist z.B. ein in PHP geschriebener Crawler von dem du den Quelltext anschauen kannst.

 

[thehacker]

Hey danke,
mein English ist leider nicht so gut
also wie kann ich den jetzt so programmieren?

 

[saftmeister]

Da gibts ein Quick-Start: http://phpcrawl.cuab.de/quickstart.html

Wenn du etwas konkretes nicht verstehst, kann dir hier bestimmt geholfen werden. Es wird aber niemand bereit sein, die Hauptarbeit für dich zu machen. Versuch es mit der Anleitung erst mal selbst, wenn du auf nicht zu überwindende Probleme stößt, frag nach.

 

[leo123]

Und wenn du's doch selber machen möchtest, dann müsstes du UNBEDINGT die robots.txt Dateien berücksichtigen, denn sonst könnte ich mir gut vor stellen, das es strafbar wird.

Edit: Hier noch zwei ergänzende Links, zu anderen PHP Crawlern:

• http://whiteboxcomputing.com/php/crawler/
• http://php-crawler.sourceforge.net/