使用Requests库和BeautifulSoup库爬取网页上需要的文字和图片
最近对爬虫比较感兴趣,所以学了一下。 看到网上人们爬取了这么多美女照片,我迫不及待地想尝试一下。 其实爬取图片和下载图片是一样的。 都是操作链接,也就是url,所以当我们确定要抓取的内容后,就需要开始寻找url了,所以先打开百度图片进行搜索然后使用浏览器F12进入开发者模式,或者右键-点击查看元素并注意xhr,点击观察有什么不同(如果没有xhr,则会在网页上滑落)第一个是这样,第二个是这样,注意看看pn对吗? 30的倍数,而且此时网页图片的数量也在不断增加,发现了这个,输入url看一下,先看一下原来的网页源码查看——: