Python script for crawling API stops for some reason - make suggestions for improvement
- Κατάσταση: Closed
- Βραβείο: $20
- Ληφθείσες Συμμετοχές: 3
- Νικητής: RedLayers
Σύνοψη Διαγωνισμού
Dear all,
We're using the below script for making requests with the crawling provider proxycrawl.com (the documentation can be accessed here after having created a free account: https://proxycrawl.com/dashboard/docs).
The script is working well in general, however with one problem remaining: It simply stops working from time to time - sometimes after having successfully crawled a couple of hundred, sometimes only after a couple of thousand URLs. But we can't get it stable to crawl a couple of 10k URLs.
Please make suggestions right in the code - including a comment that describes why you made the change. We'll then test it and award the amount if the change brings the desired result.
Looking forward to your contributions!
Προτεινόμενες Δεξιότητες
Σχόλια Εργοδότη
“Mario is a great guy and a pleasure to work with!”
thomasjohn6, Germany.
Κορυφαίες καταχωρήσεις από αυτόν τον διαγωνισμό
-
zaidur101 Bangladesh
-
abirrajdut Bangladesh
Δημόσιος Πίνακας Διευκρινίσεων
Πώς να ξεκινήσετε με τους διαγωνισμούς
-
Αναρτήστε τον διαγωνισμό σας Γρήγορα και εύκολα
-
Λάβετε Πολλές Συμμετοχές Από όλο τον κόσμο
-
Βραβεύστε την καλύτερη καταχώρηση Κατεβάστε τα αρχεία - Εύκολα!