from scrapy import cmdlinedef doSth():
# 把爬虫程序放在这个类里 zhilian_spider 是爬虫的name
cmdline.execute('scrapy crawl zhilian_spider'.split())# 想几点更新,定时到几点def time_ti(h=17, m=54):
while True:
now = datetime.datetime.now() # print(now.hour, now.minute)
if now.hour == h and now.minute == m:
doSth() # 每隔60秒检测一次
time.sleep(60)
time_ti()网上说这样可以实现定时爬虫,但是我发现在某一次进入爬虫doSth()之后,整个循环程序在结束该次爬虫后就结束了,这是为什么呢
添加回答
举报
0/150
提交
取消