学python网络爬虫。能做什么

发布网友发布时间：2022-03-25 18:54

共4个回答

热心网友时间：2022-03-25 20:23

什么是爬虫？

网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维*息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。

其实通俗的讲就是通过程序去获取web页面上自己想要的数据，也就是自动抓取数据

爬虫可以做什么？

你可以用爬虫爬图片，爬取视频等等你想要爬取的数据，只要你能通过浏览器访问的数据都可以通过爬虫获取。

爬虫的本质是什么？

模拟浏览器打开网页，获取网页中我们想要的那部分数据

热心网友时间：2022-03-25 21:41

爬虫是网络自动化的一种表现，比如一个汽车综合资讯的网站，我们想下载所以汽车品牌的所有车型资料。没有爬虫，可能就要一个一个网页点开，然后复制粘贴到文件来保存它。爬虫就可以代替人工做这一系列的事情。
获取网页vip视频地址一般情况是做不了，除非个别小网站存在一些漏洞。

热心网友时间：2022-03-25 23:33

大平台是的视频地址都是做过加密处理的，爬到的也不是真实地址，没用的。一些大网站知名的平台，甚至还可能要通过token参数请求才能有效访问视频资源。

热心网友时间：2022-03-26 01:41

网页上能看到的，甚至看不到的都能下载下来，不管是什么vip还是要收费

首页

文章

学python网络爬虫。能做什么