pyspider使用phantomjs获取上一页的链接并获取當前页的内容。
# 将本页地址交给详情页抓取处理 # 获取到上一页下一页的链接,并进行抓取
webui里调试执行采集脚本可以运行点击任务列表那里的run就不行,只执行一次index_page的代码就结束了根本就没有执行detail_page。detail_page是以fetch_type="js"方式采集数据的
请问是什么原因?如何解决
pyspider使用phantomjs获取上一页的链接并获取當前页的内容。
# 将本页地址交给详情页抓取处理 # 获取到上一页下一页的链接,并进行抓取
webui里调试执行采集脚本可以运行点击任务列表那里的run就不行,只执行一次index_page的代码就结束了根本就没有执行detail_page。detail_page是以fetch_type="js"方式采集数据的
请问是什么原因?如何解决
pyspider使用phantomjs获取上一页的链接并获取當前页的内容。
# 将本页地址交给详情页抓取处理 # 获取到上一页下一页的链接,并进行抓取
webui里调试执行采集脚本可以运行点击任务列表那里的run就不行,只执行一次index_page的代码就结束了根本就没有执行detail_page。detail_page是以fetch_type="js"方式采集数据的
请问是什么原因?如何解决
pyspider使用phantomjs获取上一页的链接并获取當前页的内容。
# 将本页地址交给详情页抓取处理 # 获取到上一页下一页的链接,并进行抓取
webui里调试执行采集脚本可以运行点击任务列表那里的run就不行,只执行一次index_page的代码就结束了根本就没有执行detail_page。detail_page是以fetch_type="js"方式采集数据的
请问是什么原因?如何解决
版权声明:文章内容来源于网络,版权归原作者所有,如有侵权请点击这里与我们联系,我们将及时删除。