Exemples de code de travail pyspider simplifiés
Extraction et filtrage des URLs sur la pagee d'accuiel
@config(age=10 * 24 * 60 * 60)
def page_accueil(self, response):
for element in response.doc('a[href^="http"]').items():
if re.match('http://www.yunjinet.com/sell/show.+', element.attr.href):
self.crawl(element.attr.href, callback=self.page_detail)
...
Publié le 28 juillet à 07h23