我发起了一个 分布式爬虫调度 的 开源项目 DSpiders
Posted ksongking
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了我发起了一个 分布式爬虫调度 的 开源项目 DSpiders相关的知识，希望对你有一定的参考价值。
大家好，
QQ 群 里的 网友 提议 搞一个 分布式爬虫调度项目，所以发起了这个项目 。
DSpiders， D 表示 “分布式”（Distributed） ， Spiders 取 复数 表示 很多 的 小爬虫，爬呀爬 …… 很可爱 ……
以上是关于我发起了一个 分布式爬虫调度 的 开源项目 DSpiders的主要内容，如果未能解决你的问题，请参考以下文章
开源分布式任务调度系统就选：DolphinScheduler