回答了问题2016-10-15
@足兆叉虫 这个确实是调试时的前台错位,而且在后台fetcher会报这样的错误:[E 161014 23:45:09 tornado_fetcher:202] [599] douban:f25b579c7b441d19bc800412cccb145b [链接] ValueError('No JSON object could be decoded',) 50.00s我调试完成后,真正开始爬取时,...
回答了问题2016-10-15
根据 @足兆叉虫 的指点(非常感谢),使用如下方法能成功翻页: {代码...}
提出了问题2016-10-14
提出了问题2016-10-14
回答了问题2016-08-16
自己稍微研究了pyspider源码,成功试验了一个方案。方案背景如下:1)首先,在webui里编写代码后点击保存时会将代码按照一定的格式写入数据库;2)把工程状态改成RUNNING时会更新数据库中status字段;3)最后点击“run”按钮时浏览器会发送一个run的post请求到webui/in...
提出了问题2016-08-15