前言

哈喽！哈喽！我是栗子同学~

小编从最初的Python入门安装开始到现在更新了90多篇文章啦。

但是新手系列更新完之后——后续的爬虫系列更不动，大家也知道这个机制，很多内容不能发

滴！很多小伙伴儿想学习爬虫的，这次先浅浅的给大家安排一些之前小编浅尝的小项目。

爬虫系列——准备安排一波哈👇之后能过的话再慢慢给大家一个内容一个内容的更新！

（爬虫系列文章已经开始再微信公众号开始写啦 喜欢的文末可以关注下哦！）

正文

一、爬虫的基本原理 

所谓爬虫就是一个自动化数据采集工具，你只要告诉它要采集哪些数据，丢给它一个 URL，就

能自动地抓取数据了其背后的基本原理就是爬虫程序向目标服务器发起 HTTP 请求，然后目标

服务器返回响应结果，爬虫客户端收到响应并从中提取数据，再进行数据清洗、数据存储作。 

 二、爬虫的基本流程 

爬虫的基本流程其实就是一个 HTTP 请求的过程，以浏览器访问一个网址为例，从用户输入 

URL 开始，客户端通过 DNS 解析查询到目标服务器的 IP 地址，然后与之建立 TCP 连接，连

接成功后，浏览器构造一个 HTTP 请求发送给服务器，服务器收到请求之后，从数据库查到相

应的数据并封装成一个 HTTP 响应，然后将响应结果返回给浏览器，浏览器对响应内容进行数

据解析、提取、渲染并最终展示在你面前。

三、爬虫实战40例（小部分）

1. 淘宝模拟登录

2. 天猫商品数据爬取

3. 爬取5k分辨率超清唯美壁纸

4. 爬取豆瓣排行榜电影数据

5. 爬取天天基金网、股票数据

6. 微信公众号文章爬虫

7. 豆瓣读书的爬虫

8. 教务网

9. 链家成交在售在租房源

10. 拉勾网

11. 王者荣耀皮肤爬虫

12. 漫画喵 一键下载漫画~

13. 妹子图

14. 猫眼网电影评分

15. QQ空间、群

16. 各大平台音乐

17. 去哪儿旅游网

18. 前程无忧Python招聘岗位信息爬取分析

19. 视频信息爬虫

20. 糗事百科

21. 链家网和贝壳网房价爬虫

22. 雪球网股票超级爬虫

23. Python爬虫，京东自动登录，在线抢购商品

24. 知乎爬虫

25. 新浪微博爬虫分享（一天可抓取 1300 万条数据）

26. 爬取下来的数据怎么保存？ CSV 了解一下

27. python爬取 20w 表情包之后，从此你就成为了微信斗图届的高手

28. python爬取你喜欢的公众号的所有原创文章，然后搞成PDF慢慢看

29. 高考要来了，扒一扒历年高考录取分数来压压惊！

30. 就算你被封了也能继续爬，使用IP代理池伪装你的IP地址，让IP飘一会

31. 对于b站这样的滑动验证码，不好意思，照样自动识别

32. 教你通过 Fiddler 进行手机抓包？

33. 那个叫做 Urllib 的库让我们的 python 假装是浏览器

34. 年轻人，不会正则表达式你睡得着觉？有点出息没有？

35. 有了 BeautifulSoup ，妈妈再也不用担心我的正则表达式了

36. scrapy爬多级网页及图片（一般方法)

37. scrapy爬多级网页及图片（ImagesPipeline)

38. App抓取并存入MongoDB

39. 抓取手机App数据

40. 你爬下的数据不分析一波可就亏了啊，使用python进行数据可视化

都是一些简单的爬虫案例、难的爬虫小编也还在学习中，数据分析还是先缓一缓啦！

对了还有几个简单的破解vip音乐、白嫖付费文章跟vip电影的也有的哈！

总结

好啦！上面都是小编整理的一些简单的爬虫实战案例，如果你是新手还没有安装那就先找小编

拿最基础的新手大礼包叭~像试试简单的爬虫项目的就可以直接开干啦👇学习学习👇

✨完整的素材源码等：可以滴滴我吖！或者点击文末hao自取免费拿的哈~

😘往期推荐阅读——

项目0.1  【Python爬虫系列】Python爬虫入门并不难，甚至入门也很简单（引言）项目0.2

项目0.3   Python爬虫入门推荐案例:学会爬虫_表情包手到擒来~

项目0.4 【Tkinter界面化小程序】用Python做一款免费音乐下载器、无广告无弹窗、清爽超流畅哦

🎁文章汇总——

Python文章合集 | (入门到实战、游戏、Turtle、案例等)

（文章汇总还有更多你案例等你来学习啦~源码找我即可免费！）