小言_互联网的博客

【开发环境配置】【Python爬虫】请求库的安装

363人阅读  评论(0)

requests的安装

1.pip安装

无论是Windows、Linux还是Mac,都可以通过pip这个包管理工具来安装。在命令行界面中运行如下命令,即可完成requests库的安装:

pip3 install requests

这是最简单的安装方式,推荐使用这种方法安装。

2. 验证是否安装成功

打开命令行工具cmd,进入Python环境,输入import requests,没有报错则说明安装成功。

selenium的安装

Selenium是一个自动化测试工具,利用它我们可以驱动浏览器执行特定的动作,如点击、下拉等操作。对于一些JavaScript渲染的页面来说,这种抓取方式非常有效。

下面我们来看看selenium的安装过程。

1.pip安装

pip3 install selenium

2.验证是否安装成功

方法与安装requests库时的验证方法一样,打开cmd输入python,然后继续输入import selenium,没报错则说明安装成功。

ChromeDriver的安装

前面我们成功安装好了selenium库,但是它是一个自动化测试工具,需要浏览器来配合使用,本节中我们就介绍一下ChromeDriver驱动的配置。
首先,下载Chrome浏览器。
随后安装ChromeDriver。只有安装ChromeDriver,才能驱动Chrome浏览器完成相应的操作。接下来,我们来安装ChromeDriver。

1.下载链接

官方网站

下载地址

2.查看Chrome浏览器版本


这里我的Chrome版本是90.0。记住你们的Chrome版本号,因为选择ChromeDriver版本时需要用到。

3.下载ChromeDriver

打开ChromeDriver的官方网站,选择对应的版本号进行下载。

4.环境变量配置

下载完成后,将ChromeDriver的可执行文件配置到环境变量下。
在Windows下,建议直接将ChromeDriver.exe文件拖到Python的script目录下,如图所示。

5.验证安装

配置完成后,就可以在命令行下直接执行ChromeDriver命令了:
chromedriver
如果控制台有类似如下图所示的输出,则说明ChromeDriver的环境变量配置好了。

随后再在程序中测试。执行如下Python代码:

from selenium import webdriver

driver = webdriver.Chrome()
driver.get("https://www.baidu.com")

driver.find_element_by_id("kw").send_keys("selenium")
driver.find_element_by_id("su").click()

运行之后,如果弹出一个空白的Chrome浏览器,则说明所有的配置都没有问题。如果出现闪退情况,可能是ChromeDriver版本与浏览器版本不兼容,请更换ChromeDriver版本。


转载:https://blog.csdn.net/m0_46405703/article/details/115960691
查看评论
* 以上用户言论只代表其个人观点,不代表本网站的观点或立场