[1]-微信公众号爬虫。基于搜狗微信搜索的微信公众号爬虫接口可以扩展为基于搜狗搜索的爬虫。返回的结果是一个列表，每一项都是公众号具体信息的字典。 [1]：

[2]-豆瓣阅读爬虫。你可以爬取豆瓣阅读标签下的所有书籍，按评分排序存储，并存储在Excel中，这样更方便大家筛选和搜索，比如过滤1000条以上评论的高分书籍； Excel中可以根据不同的主题存储在不同的Sheet中。 ，使用User Agent冒充浏览器进行爬行，并添加随机延迟，以更好地模仿浏览器行为，避免爬虫被拦截。 [2]：

[3]-知乎爬虫。本项目的功能是爬取知乎用户信息和人际拓扑关系，利用爬虫框架和数据存储。 [3]：

-user[4]- 用户爬虫。数据总数：，抓取字段：用户id、昵称、性别、头像、等级、经验值、粉丝数、生日、地址、注册时间、签名、等级和经验值等。爬取后，生成一条用户数据B站报道[4]：

[5]- 新浪微博爬虫。主要抓取新浪微博用户的个人信息、微博信息、粉丝和关注者。从新浪微博获取验证码进行登录，可以使用多个账号登录，防止新浪反盗版。主要使用爬虫框架。 [5]：

[6]-小说下载分布式爬虫。使用redis实现的分布式网络爬虫，底层存储集群使用redis分布式，使用redis实现爬虫状态显示，主要针对某小说网站。 [6]：

[7]-CNKI爬虫。设置搜索条件后，执行src/.py捕获数据。捕获的数据存储在/data目录中。每个数据文件的第一行是字段名称。 [7]：

[8]-链家爬虫。爬取链家历年北京二手房交易记录。涵盖了链家爬虫文章中的所有代码，包括链家模拟登录代码。 [8]：

[9]-京东爬虫。基于京东网站爬虫，保存格式为csv。 [9]：

QQ--[10]-群爬虫。批量抓取群组信息，包括群组名称、群组编号、群组编号、群组所有者、群组简介等，最终生成XLS(X)/CSV结果文件。 [10]：

[11] - 乌云爬行者。暗云暴露了漏洞、知识库爬虫和搜索。所有公开的漏洞列表以及每个漏洞的文本内容均存在，约2G内容；如果把整个网站全部文字、图片爬取作为离线查询，大约需要10G空间，2小时左右（10M电信带宽）；爬取整个知识库，总共约500M空间。漏洞搜索使用 Flask 作为 Web 和前端。 [11]：

2016.9.11 补充：

[12]-去哪儿爬虫。网络爬虫使用代理登录：爬取去哪儿网站，使用模拟浏览器登录，获取翻页操作。代理可以保存到文件中，程序可以读取和使用该文件。支持多进程爬取。 [12]：

[13]- 机票爬虫（去哪儿、携程）。是一款基于机票的爬虫，目前整合了国内两大机票网站（去哪儿+携程）。 [13]：

[14] - 基于网易客户端内容爬虫，。 [14]：

[15]- 豆瓣电影、书籍、群、相册、东西等爬虫合集。 [15]：

[16]-QQ空间爬虫，包括日志、谈话、个人信息等，一天可爬取400万条数据。 [16]：

baidu-music-[17]- 百度mp3全站爬虫，使用redis支持断点续传下载。 [17]：

[18]- 淘宝、天猫爬虫可以根据搜索关键词和商品ID抓取页面信息，并将数据存储在[18]:

[19]- 一个股票数据（沪深）爬虫及选股策略测试框架。根据选定的日期范围捕获所有上海和深圳股票市场的市场数据。支持使用表达式定义选股策略。支持多线程。将数据保存到 JSON 文件或 CSV 文件。 [19]

--------------------------

本项目包含各种网络爬虫实用开源代码，并将长期更新。欢迎补充。

# WechatSogou微信公众号爬虫、DouBanSpider豆瓣读书爬虫与zhihu_spider  # 群组  # 新浪  # 链家  # 去哪儿  # 数据存储  # 并将  # 经验值  # 可以根据  # 个人信息  # 搜狗  # 携程  # 选股  # 都是  # 是一个  # 京东  # 离线  # 注册时间  # 你可以  # 多个  # 两大  # 口碑好的网站推广价格高  # 邯山区营销推广中心地址  # 邯郸网站优化推广可靠吗  # 滨州推广营销  # 兰州论坛营销推广网站  # 杨浦抖音营销推广怎么做  # 宝鸡营销推广怎么选  # 株洲网站优化网络推广  # 市场营销和公关推广  # 湖南提供网站推广多少钱  # 新疆公司推广员招聘网站  # 东莞营销推广大师排名榜  # 鞋产品网站建设方案  # 张从利seo博客  # 袋装茶营销思路及推广  # 台州天台外贸推广seo  # 墨家seo  # seo需求的重要性  # 哪里有网站建设加盟平台  # 河西区网站建设论坛 

相关栏目： 【 网站优化151355 】 【 网络推广146373 】 【 网络技术251813 】 【 AI营销90571 】

相关推荐： 湖北SEO万词霸屏,介绍高效网络营销步骤,中山网站优化热线  搜索引擎优化（SEO）的艺术与科学,长安网站建设公司大全  SEO本站：提升网站流量与排名的秘密武器,荆门专业的抖音seo  广州百度推广负责人，解读数字营销的未来之路,客户网站建设工程  探索未知，如何通过SEO优化提升网站流量,市中区关键词seo排名优化  北京SEO优化公司，如何让你的网站在竞争激烈的市场中脱颖而出,淮安营销网络推广平台有哪些  淘宝SEO三大秘诀，如何让你的店铺脱颖而出？,未来互联网营销推广  拼多多SEO优化，如何让您的电商店铺在竞争激烈的市场中脱颖而出,医疗营销推广方案ppt内容排版  广州百度推广费如何收取？详细解读！,如何做好手机网站推广  探索未知，莱山SEO推广的奥秘与实践,重庆网站建设 夹夹虫  从镜像中汲取力量，探索自媒体的SEO奥秘,唐山网站建设制作报价  黄山SEO推广口碑爆棚，介绍其背后的秘密与优势,网站内容seo  SEO新闻：2025年最新趋势与最佳实践，你不可错过的SEO战略,郑州网络营销推广的优势  揭秘SEO315晚会的背后，如何巧妙规避风险？,华为网站seo关键词  广州百度推广收费标准解析,天津企业网站推广哪家强  SEO自行：提升网站流量的秘密武器,邹平县个人网站建设建议  酒香咖啡豆SEO,如何让您的咖啡店在互联网上独树一帜,西城seo优化厂家  广州百度推广如何提升转化率？,平山品牌网站建设报价  SEO挣钱之道：如何通过SEO实现网络盈利,宁晋网站建设商家  介绍营口抖音SEO价格,投资回报，你值得拥有！,seo十大关键词排名  江门网络SEO推广机构,助力企业抢占网络市场制高点,vue 路由 seo  火星软件,SEO推广领域的璀璨明星,重庆网站seo推广  揭秘自媒体营销的秘密武器，如何利用内容创造流量与转化,网站建设优化富海  SEO大量优化：如何通过精准策略提升网站流量，突破搜索引擎排名瓶颈,吕梁本地网站推广平台  介绍十堰SEO网络推广价格,性价比之选，助力企业腾飞,上海知名seo公司  SEO要好，网站流量翻倍的关键秘诀,品牌网站建设关键词优化  SEO收集：如何通过有效数据收集提升网站排名,鞍山商城网站建设报价  探索山西SEO优化公司的奥秘,枣庄化工网站建设招标  广州百度推广代运营，助力企业数字营销新突破,定陶网站建设培训  嗨格式在线录屏的功能特点及操作指南，你知道多少？   广州百度推广好吗？深入解析其优势与效果,汽车搜索网站建设  忘记微信密码莫慌张！官方推荐这几种轻松找回账号的方法   SEO策划：让你的网站迅速脱颖而出的秘诀,seo优化和技巧  SEO优化：让你的网站在竞争中脱颖而出,临沧seo代理  淘宝站内SEO，打造爆款秘诀大揭秘,推广网站举荐易速达  福建百度推广没接到电话怎么办？解决方案全解析,互联网推广营销|视频|教学  如何选择合适的SEO加盟品牌？,seo优化项目经验心得  武汉商品SEO推广步骤,让您的商品在互联网上脱颖而出,河南百度关键词排名优化  河北SEO推广外包公司,助力企业高效提升网络知名度,奇台seo培训  探索未知，如何高效利用自媒体打造个人品牌,天企如何推广网站  SEO网络推广霸屏,介绍互联网时代下的品牌崛起之路,seo写法大全  广州百度推广资质代办，助您快速打开数字营销新局面,德州手机网站建设费用  日常求人不得？这6款老司机才懂的见光死网站快收藏   女生主动加微信背后的多重意涵及应对策略解析   探索SEO优化设计的奥秘，提升企业网站在搜索引擎中的排名,seo 搜索技巧  衢州SEO基础优化报价介绍,如何以最低成本打造高效搜索引擎排名,南阳怎么做优化网站  朝阳SEO网站优化趋势,紧跟时代步伐，助力企业腾飞,网站百度权重优化建议书  SEO提高：如何通过精准优化让网站流量翻倍,优化排名seo加盟费用  广州百度推广设计，助力品牌精准营销的秘诀,英文版网站建设服务  深圳建站SEO，打造数字新时代的基石与航标,seo推广技术教程