网络爬虫学习笔记

就想写个爬虫，我到底要学多少东西啊？

爬虫基础原理 🕷️

• 必知必会，掌握 HTTP 基本原理
• 夯实根基，Web 网页基础
• 原理探究，了解爬虫的基本原理
• 基础探究，Session 与 Cookies
• 多路加速，了解多线程基本原理
• 多路加速，了解多进程基本原理
• Ajax 的原理和解析
• 代理的基本原理和用法
• 异步爬虫的原理和解析

网络请求 🤖

• python模块详解 | requests
• python模块详解 | aiohttp
• python模块详解 | urllib

文本解析 📖

• python模块详解 | pyquery
• python学习笔记 | xpath
• python模块详解 | re
• python模块详解 | BeautifulSoup

自动化 🏓

• python模块详解 | selenium
• python模块详解 | pyppeteer

爬虫框架 🕸

• scrapy在路上了…
• feapder在路上了…

项目实例 🍳

• GlidedSky爬虫题目

• NCP | 爬取国家卫健委网站

• NCP | 新冠疫情的监测与趋势分析

• python学习笔记 | macOS Big Sur动态壁纸食用指南

• 深信息学生信息查询系统

• 使用selenium登录雨课堂并获取课程信息