爬虫是什么意思

网络爬虫又称网络蜘蛛、网络机器人，这是一种依照相应的规则自动浏览、检索网页信息的程序或是脚本。网络爬虫可以自动请求网页，并把需要用到的数据抓取下来。通过对抓取的数据进行处理，从而提取出有价值的信息。

爬虫是什么意思

当我们发送完网络请求后，我们的电脑就会出现一些数据，比如：我们搜索“什么是python”，电脑的浏览器就会显示一些网页和链接，而这些显示出来的信息就是本电脑和另外的电脑或是服务器连接后，响应本电脑网络请求的数据。

响应网络请求会产生大量的数据（我们搜一个关键词会出来成百上千万的结果），所以这些数据有一个管理集合叫“超文本传输协议”，也是我们经常在网址上看到的前缀“http”。而http有5种请求方式，分别是：get、post、put、delete、head，其中get请求和post请求最常用。