2022年 11月 5日

简单的python脚本-爬虫

前面我们学习了一些python的简单知识之后,就可以开始学习写一些简单的python脚本来进行爬虫获取一些数据了。首先我们要先导入requests库,file->other settings->preferences for new projects,然后就是去导入requests库:如下:

导入成功之后会有成功的提示,

然后我们点击应用,ok,这时候我们就可以进行爬虫代码的编写了。如下:我们先来爬一下百度翻译的数据。

首先是导入requests库,获取百度翻译的网址,然后是输入URL,requests.get(url),然后print打印出来,这样我们就获取了百度翻译的网页数据。

如下是python的代码:

下面是输出的结果:

 这里我们用的是get的请求方式,如果是post的请求方式的话,还要加上一个请求头。

这样我们就获取到了自己想要的数据源。