Spider Engine
| Project Name | Stars | Downloads | Repos Using This | Packages Using This | Most Recent Commit | Total Releases | Latest Release | Open Issues | License | Language |
|---|---|---|---|---|---|---|---|---|---|---|
| Avbook | 8,777 | a year ago | 85 | PHP | ||||||
| AV 电影管理系统， avmoo , javbus , javlibrary 爬虫，线上 AV 影片图书馆，AV 磁力链接数据库，Japanese Adult Video Library,Adult Video Magnet Links - Japanese Adult Video Database | ||||||||||
| Lianjia Beike Spider | 2,464 | 9 months ago | 13 | Python | ||||||
| 链家网和贝壳网房价爬虫，采集北京上海广州深圳等21个中国主要城市的房价数据（小区，二手房，出租房，新房），稳定可靠快速！支持csv,MySQL, MongoDB,Excel, json存储，支持Python2和3，图表展示数据，注释丰富 ，点星支持，仅供学习参考，请勿用于商业用途，后果自负。 | ||||||||||
| Wechat Spider | 1,753 | a year ago | 50 | Python | ||||||
| 开源微信爬虫：爬取公众号所有 文章、阅读量、点赞量和评论内容。易部署。持续维护！！！ | ||||||||||
| Funpyspidersearchengine | 862 | 2 years ago | 3 | mit | Python | |||||
| Word2vec 千人千面 个性化搜索 + Scrapy2.3.0(爬取数据) + ElasticSearch7.9.1(存储数据并提供对外Restful API) + Django3.1.1 搜索 | ||||||||||
| Python Spider | 680 | 2 years ago | apache-2.0 | Python | ||||||
| 豆瓣电影top250、斗鱼爬取json数据以及爬取美女图片、淘宝、有缘、CrawlSpider爬取红娘网相亲人的部分基本信息以及红娘网分布式爬取和存储redis、爬虫小demo、Selenium、爬取多点、django开发接口、爬取有缘网信息、模拟知乎登录、模拟github登录、模拟图虫网登录、爬取多点商城整站数据、爬取微信公众号历史文章、爬取微信群或者微信好友分享的文章、itchat监听指定微信公众号分享的文章 | ||||||||||
| Replication Manager | 611 | 3 months ago | 24 | March 09, 2020 | 118 | gpl-3.0 | Go | |||
| Signal 18 repman - Replication Manager for MySQL / MariaDB / Percona Server | ||||||||||
| Gospider | 354 | 1 | a year ago | 3 | April 24, 2019 | 13 | mit | Go | ||
| golang实现的爬虫框架，使用者只需关心页面规则，提供web管理界面。基于colly开发。 | ||||||||||
| Jobspiders | 171 | a year ago | 6 | apache-2.0 | Python | |||||
| scrapy框架爬取51job(scrapy.Spider)，智联招聘(扒接口)，拉勾网(CrawlSpider) | ||||||||||
| Jobs Search | 102 | 7 years ago | Python | |||||||
| :spider:招聘网站爬虫合集，不定期更新分支 | ||||||||||
| Bilibili_member_crawler | 98 | 5 years ago | 1 | mit | Python | |||||
| B站用户爬虫 好耶~是爬虫 | ||||||||||
Alternatives To Spider EngineSelect To Compare
Alternative Project Comparisons
Popular Mysql Projects
Popular Spider Projects
Popular Data Storage Categories
Get A Weekly Email With Trending Projects For These Categories
No Spam. Unsubscribe easily at any time.
Golang
Mysql
Spider
Raft