81个Python爬虫源代码+九款开源python爬虫软件爬虫工具81个Python爬虫源代码，内容包含新闻、视频、中介、招聘、图片资源等网站的爬虫资源

基于搜狗微信搜索的微信公众号爬虫接口可以扩展成基于搜狗搜索的爬虫，返回结果是列表每一项均是公众号具体信息字典。

此项目的功能是爬取知乎用户信息以及囚际拓扑关系爬虫框架使用scrapy，数据存储使用mongo

主要爬取新浪微博用户的个人信息、微博信息、粉丝和关注代码获取新浪微博Cookie进行登录，鈳通过多账号登录来防止新浪的反扒主要使用 scrapy 爬虫框架。

爬取北京地区链家历年二手房成交记录涵盖链家爬虫一文的全部代码，包括鏈家模拟登录代码

批量抓取 QQ 群信息，包括群名称、群号、群人数、群主、群简介等内容最终生成 XLS(X) / CSV 结果文件。

以hao123为入口页面滚动爬取外链，收集网址并记录网址上的内链和外链数目，记录title等信息windows7 32位上测试，目前每24个小时可收集数据为10万左右

QQSpider [16]– QQ空间爬虫，包括日志、说说、个人信息等一天可抓取 400 万条数据。

tbcrawler[18]– 淘宝和天猫的爬虫,可以根据搜索关键词,物品id来抓去页面的信息数据存储在mongodb。