python爬虫项目合集，从基础到js逆向，包含基础篇、自动化篇、进阶篇以及验证码篇。案例涵盖各大网站(xhs douyin weibo ins boss job，jd...)，你将会学到有关爬虫以及反爬虫、自动化和验证码的各方面知识

• UpdatedSep 23, 2024
• JavaScript

BaiduSpider，一个爬取百度搜索结果的爬虫，目前支持百度网页搜索，百度图片搜索，百度知道搜索，百度视频搜索，百度资讯搜索，百度文库搜索，百度经验搜索和百度百科搜索。

• UpdatedJun 14, 2024
• Python

python3网络爬虫笔记与实战源码。记录python爬虫学习全程笔记、参考资料和常见错误，约40个爬取实例与思路解析，涵盖urllib、requests、bs4、jsonpath、re、 pytesseract、PIL等常用库的使用。

• UpdatedJan 22, 2021
• HTML

A simple distributed crawler for zhihu && data analysis

• UpdatedDec 7, 2022
• Python

TLS Requests is a powerful Python library for secure HTTP requests, offering browser-like TLS client, fingerprinting, anti-bot page bypass, and high performance.

• UpdatedNov 23, 2025
• Python

Python Crawler

• UpdatedJun 5, 2017
• Python

It's designed to be a simple, tiny, pratical python crawler using json and sqlite instead of mysql or mongdb. The destination website is Zhihu.com.

• UpdatedDec 5, 2019
• JavaScript

🐍A collection of simple Python crawlers.

• UpdatedSep 14, 2020
• Python

豆瓣电影爬虫: 电影信息 + 影评 + 短评

• UpdatedJan 2, 2019
• Python

🚀 OFFICIAL STARTER TEMPLATE FOR BOTASAURUS SCRAPING FRAMEWORK 🤖

• UpdatedJul 12, 2025
• TypeScript

这是也一个爬虫教学的项目

• UpdatedNov 8, 2019

This repo is mainly for dynamic web (Ajax Tech) crawling using Python, taking China's NSTL websites as an example.

• UpdatedJun 6, 2023
• Python

just for python learning.

• UpdatedMay 3, 2020
• Python

keep watching new bug bounty (vulnerability) postings.

• UpdatedApr 7, 2024
• Python

支持多种爬取方式，下载用户相册，爬取用户帖子，爬取实时搜索帖子等，欢迎下载使用和补充功能

• UpdatedSep 24, 2023
• Python

大三课设。本项目是一个基于Django框架的股票分红数据爬虫和展示系统。它可以从东方财富网站爬取股票分红数据，并将数据存储到Django数据库中，同时提供数据查询、导出和图表展示功能。

• UpdatedOct 18, 2024
• Python

🐍🗺️ This Python script empowers you to scrape data from Google Maps, enabling extraction of valuable information like addresses, reviews, and ratings. 📋🏢⭐

• UpdatedAug 5, 2023
• Python

Python airline/flights data crawler

• UpdatedDec 14, 2018
• Python

a simple web of data visualization

• UpdatedFeb 18, 2023
• HTML

Python asynchronous library for web scrapping

• UpdatedAug 24, 2021
• Python