小伟 发表于 2020-3-17 20:33:28

python爬虫


[*]requests 库
[*]安装pip import requests经常会无法安装五哦一我们可以使用下载压缩包 使用 python setup.py的方式

[*]网址https://github.com/kennethreitz/requests

[*]Request (请求):每一个展示在用户面前的网页都必须经过这一步,也就是向服务器发送访问请求。
[*]Response(响应):服务器在接收到用户的请求后,会验证请求的有效性,然后向用户(客户端)发送响应的内容,客户端接收服务器响应的内容,将内容展示出来,就是我们所熟悉的网页请求
[*]然后我们就可以使用他来进行网站的数据获取
[*]import requests #导入requests包
requests.packages.urllib3.disable_warnings()#避免报错
url = 'http://www.kaliorg.com/'
strhtml = requests.get(url,verify=False) #Get方式获取网页数据 verify=False避免ssl认证
print(strhtml.text)

页: [1]
查看完整版本: python爬虫