python爬虫的学习-01

我对爬虫的初映象便是可以爬天，爬地，爬空气，不知道大家有没有遇到这样的需求，就是想把互联网中重要的信息为己所用，于是我就开启了我自己的爬虫之路，爬虫也为我开启了一扇扇的大门，比如在哪些地方看到一些美女的图片或视频，想要在夜深人际之时拿出来慢慢地品味，那么爬虫就十分适合你（-猥琐脸-）

爬虫和python
爬虫的本质：通过编写程序来获得互联网的资源
首先，我在学习的过程中经常看到很多人问，学爬虫一定要用python嘛，我想这肯定是不一定的，在我看来，python也许是语法比较简单，它具有很多官方的库，对小白上手比较快，所以说人们都选择用python
其次，在我看来，爬虫分为善意的爬虫和恶意的爬虫，善意的爬虫就是不破坏爬取网站的资源（比如我们只是用来学习，或者看看美女啥的），恶意的爬虫就比如刷单，抢票之类的

Web请求过程剖析
1.服务器渲染：在服务器那边直接把数据和html整合在一起，统一返回给浏览器

2.客户端渲染：第一次请求只要一个html骨架，第二次请求拿到数据进行数据展示，在页面源代码中看不到数据

Requests
Requests不是python自带的，是第三方的，需要对requests进行安装（在命令行pip install requests）
如果安装失败有可能是下载速度的问题，可以采用国内镜像进行下载

我的第一个爬虫程序
get请求

post请求