These are chat archives for dou-ua/python

21st
Feb 2016
Igor Kypeschuk
@tetrafishka
Feb 21 2016 09:33
Всім привіт! підкажіть хто працював з scrapy, чому мій павук не йде по сторінках дальше стоїть тільки на 1, викорисовую таке правило:
start_urls = [
'http://www.superjob.ru/vacancy/search/?t%5B0%5D=4&sbmit=1&period=7'
]
rules = [
    Rule(SgmlLinkExtractor(allow='/vacancy/search/?',
    restrict_xpaths=(u'//a[@class="h_border_none"]/<span>следующая</span>')),
         callback='parse',
         follow=True),
]
Paul
@Dotrox
Feb 21 2016 10:53
@tetrafishka, може, справа в кирилиці? У Python трапляются проблеми з юнікодом.
Igor Kypeschuk
@tetrafishka
Feb 21 2016 10:56
@Dotrox , я хз попробувати encode or decode