爬取的大容量文本应该保存在什么变量里?
按照老师的编写,调试后,在response.read()这句出了问题,没有报错,但总是返回craw failed。后来单独print response.read()却没问题,但内容有许多屏。 所以想问一下,是不是因为内容太多了,保存到变量html_cont时就出问题了? 对于大容量文本,应该保存到什么变量比较好? 非常感谢!!
按照老师的编写,调试后,在response.read()这句出了问题,没有报错,但总是返回craw failed。后来单独print response.read()却没问题,但内容有许多屏。 所以想问一下,是不是因为内容太多了,保存到变量html_cont时就出问题了? 对于大容量文本,应该保存到什么变量比较好? 非常感谢!!
2017-06-09
举报