本文共 1125 字，大约阅读时间需要 3 分钟。

以爬取CSDN为例子：

import urllib.requestresponse=urllib.request.urlopen("https://www.csdn.net/?spm=1011.2124.3001.5359")print(response.read().decode('utf-8'))

结果大概就是这个样子：

好的，继续，看看打印的是什么类型的：

import urllib.requestresponse=urllib.request.urlopen("https://www.csdn.net/?spm=1011.2124.3001.5359")# print(response.read().decode('utf-8'))print(type(response))

结果：

ok,再看看别的，比如（解释都在注释了）

import urllib.requestresponse=urllib.request.urlopen("https://www.csdn.net/?spm=1011.2124.3001.5359")# print(response.read().decode('utf-8'))print(type(response))#打印网页类型print(response.status)#打印返回结果的状态print(response.getheaders())#打印响应头信息

再来看看timeout使用：设置请求时间最长可以是多久，超过就不请求了

import urllib.requestresponse=urllib.request.urlopen("https://www.csdn.net/?spm=1011.2124.3001.5359",timeout=0.1)# print(response.read().decode('utf-8'))# print(type(response))#打印网页类型# print(response.status)#打印返回结果的状态# print(response.getheaders())#打印响应头信息print(response.read())

为了显示出报错，我就设置了时间为0.1秒，timeout就直接放在打开网页旁边就好了：报错The read operation timed out就是请求超时，0.1秒嘛，肯定超过0.1秒了，就自然报错了

最基本爬取网页，后续待更新

转载地址：https://chuanchuan.blog.csdn.net/article/details/113100388 如侵犯您的版权，请留言回复原文章的地址，我们会给您删除此文章，给您带来不便请您谅解！