Crawler automatisch laufen lassen?

Ja das war ja meine ursprüngliche Frage ob ich das machen kann und das irgendwie im Hintergrund laufen lassen kann oder das ich was zu tun haben?
 
Okay ich hab das jetzt so weit programmiert. Nur wollte ich noch mal fragen ob jemand von euch einen Algorythmus kennt oder schreiben kann um die Links zu sortieren, damit wichtige Links schneller aktualisiert werden?
 
Zurück