微信爬虫,获取文章内容、阅读量、点赞量、评论等,获取公众号所有历史文章链接。
Repository Index
132,241 visible repositories in the index
73–96 of 152 · Most stars
This is a lightweight, headless browser purpose-built for AI agents (such as Codex or Claude Code) to perform browser automation tasks; it is designed to navigate through various web protection systems, login processes, and reverse-engineering scenarios
- anti-bot
- automation
- firefox
- headless-browser
小红书数据采集、网站图片、视频资源批量下载工具,颜值超高的数据采集工具(批量下载,视频提取,图片)Telegram:https://t.me/+ZtLSwuIKTo44MDY1
- downloader
- wpf
- wpf-ui
- wpf-notifyicon
Nodejs实现的一个磁力链接爬虫 https://findit.keenwon.com (原域名http://findit.so )
📰 Diários oficiais brasileiros acessíveis a todos | 📰 Brazilian government gazettes, accessible to everyone.
- data-science
- politics
- open-data
- civic-tech
一个主要运行在 𝐞𝐥𝐞𝐜𝐕𝟐𝐏 或 𝐪𝐢𝐧𝐠𝐥𝐨𝐧𝐠 等定时面板,同时支持系统运行环境的签到项目(环境:𝑷𝒚𝒕𝒉𝒐𝒏 3.8+ / 𝑵𝒐𝒅𝒆.𝒋𝒔 10+ / 𝑩𝒂𝒔𝒉 4+ / 𝑶𝒑𝒆𝒏𝑱𝑫𝑲8 / 𝑷𝒆𝒓𝒍5)
- elecv2p
- qinglong
- python3
- javascript
A configurable and extensible PHP web spider
大众点评爬虫(全站可爬,解决动态字体加密,非OCR)。持续更新
A download tools for clawing the ebooks from internets.
- epub
- golang
- spider
知乎爬虫
Kspider 是一个爬虫平台,以图形化方式定义爬虫流程,无需代码即可实现一个爬虫流程,Kspider不仅限爬虫,也可用于WEB自动化测试,更多功能等你探索。
Beanbun 是用 PHP 编写的多进程网络爬虫框架,具有良好的开放性、高可扩展性,基于 Workerman。
📊 成都房协网数据分析,喜欢请点 star!
百度云网盘搜索引擎,包含爬虫 & 网站
- python
- spider
验证码研究破解心得记录。包含网易易盾,阿里云验证码,极验验证码,通用汉字识别,梦幻西游验证等主流验证码破解。包含点按验证码、点选验证、语序点选等等。已更新极验验证码、企业公示网/工商/文书采集系统、极验打码接口。
🤖/👨🦰 Detect bots/crawlers/spiders using the user agent string
- user-agent-analysis
- user-agent
- user-agent-parser
- crawlers
python爬虫
- python
- python3
- urllib
- requests
Creating Scrapy scrapers via the Django admin interface
网页自动化工具,油管等视频下载,一键搬家,视频多平台发布,一键发布到tiktok、小红书、快手、抖音、油管、B站等等平台
Scalable Python web scraping scripts for +80 popular domains
Crawly, a high-level web crawling & scraping framework for Elixir.
Golang短视频去水印:抖音,皮皮虾,火山,微视,最右,快手,全民小视频,皮皮搞笑,西瓜视频,虎牙,梨视频,acfun,好看视频...
爬取微信公众号文章
- wechat-article
- python3
- pyqt5
小说下载|小说爬取|起点|笔趣阁|导出Markdown|导出txt|转换epub|广告过滤|自动校对
- biquge
- qidian
- fiction
- novels