Project Name | Stars | Downloads | Repos Using This | Packages Using This | Most Recent Commit | Total Releases | Latest Release | Open Issues | License | Language |
---|---|---|---|---|---|---|---|---|---|---|
Gerapy | 3,144 | 8 | 2 months ago | 49 | July 19, 2023 | 60 | mit | Python | ||
Distributed Crawler Management Framework Based on Scrapy, Scrapyd, Django and Vue.js | ||||||||||
Django Dynamic Scraper | 1,069 | 26 | 2 years ago | 65 | June 25, 2021 | 38 | bsd-3-clause | Python | ||
Creating Scrapy scrapers via the Django admin interface | ||||||||||
Funpyspidersearchengine | 862 | 2 years ago | 3 | mit | Python | |||||
Word2vec 千人千面 个性化搜索 + Scrapy2.3.0(爬取数据) + ElasticSearch7.9.1(存储数据并提供对外Restful API) + Django3.1.1 搜索 | ||||||||||
Python Spider | 680 | 2 years ago | apache-2.0 | Python | ||||||
豆瓣电影top250、斗鱼爬取json数据以及爬取美女图片、淘宝、有缘、CrawlSpider爬取红娘网相亲人的部分基本信息以及红娘网分布式爬取和存储redis、爬虫小demo、Selenium、爬取多点、django开发接口、爬取有缘网信息、模拟知乎登录、模拟github登录、模拟图虫网登录、爬取多点商城整站数据、爬取微信公众号历史文章、爬取微信群或者微信好友分享的文章、itchat监听指定微信公众号分享的文章 | ||||||||||
Maria Quiteria | 168 | 6 months ago | 42 | mit | Python | |||||
Backend para coleta e disponibilização dos dados 📜 | ||||||||||
Django Covid19 | 150 | a year ago | 8 | June 09, 2020 | 11 | mit | Python | |||
实时接口获取中国各个城市、省份、国家的新型冠状肺炎(新冠肺炎 / 2019-nCoV / Covid-19)。疫情数据以及整体统计详情,新增美国各州统计、每日疫情数据 API。爬虫实时追踪新冠疫情变化,数据来自丁香园和 covidtracking.com。数据大屏示例:http://ncov.leafcoder.cn/demo/ 项目文档:http://ncov.leafcoder.cn/docs/ | ||||||||||
Scrapyd Django Template | 103 | a year ago | 5 | Python | ||||||
Basic setup to run ScrapyD + Django and save it in Django Models. You can be up and running in just a few minutes | ||||||||||
Copybook | 97 | 4 years ago | 2 | CSS | ||||||
用爬虫爬取小说网站上所有小说,存储到数据库中,并用爬到的数据构建自己的小说网站 | ||||||||||
Novelweb Python Django | 90 | 5 years ago | 2 | Python | ||||||
用python爬取数据,存入MySQL,然后用Django开发小说网站 | ||||||||||
Awesome Python Primer | 78 | 2 years ago | mit | Python | ||||||
自学入门 Python 优质中文资源索引,包含 书籍 / 文档 / 视频,适用于 爬虫 / Web / 数据分析 / 机器学习 方向 |