Python 入门:用 requests 写第一个网页请求
学 Python 做的第一件“联网”的事,往往不是做一个复杂的爬虫,而是一次最简单的网页请求:让程序替你打开一个网址,看看服务器返回了什么。requests 库就是为这一步准备的,它把网络请求封装成几行直观的代码,新手也能在十分钟内跑通第一个例子。
一、准备工作:安装与验证
requests 是第三方库,安装只需要一行命令:
pip install requests
安装完成后,在 Python 交互环境里验证一下:
import requests
print(requests.__version__)
能正常打印出版本号,就说明环境已经就绪。如果下载很慢,可以换一个国内镜像源再试一次,但不要同时安装多个名字相近的库,以免混淆。
二、第一个 GET 请求
下面就是“第一个网页请求”的完整样子,其中的测试接口地址请换成你练习用的公开测试服务地址:
import requests
TEST_URL = "请替换为练习用的测试接口地址"
r = requests.get(TEST_URL, timeout=10)
print(r.status_code)
print(r.text[:500])
运行后,status_code 是 200,表示请求成功;text 里的内容就是服务器返回的文本。对新手来说,先记住这个最短链路:发起请求、拿到响应、打印结果,其他细节都可以以后慢慢加。
三、读懂一个响应对象
requests.get() 返回的响应对象里藏着很多有用的信息:
r.status_code:状态码,200 是成功,404 是找不到页面,500 是服务器出错。r.headers:响应头,可以看到服务器类型、内容类型等信息。r.text:响应体,按文本解码后的字符串,适合看网页源码。r.json():如果返回的是 JSON 数据,用这个方法可以直接得到 Python 字典。
建议新手每次请求后都先打印状态码,再决定要不要继续解析内容,这是一个很好的习惯。
四、带参数和请求头
真实的请求很少是“裸请求”,常见的是带查询参数和请求头:
params = {"q": "python", "page": 1}
headers = {"User-Agent": "my-first-request/1.0"}
r = requests.get(TEST_URL, params=params, headers=headers, timeout=10)
print(r.url)
print(r.json()["args"])
params 会自动拼到网址后面,不用自己拼接问号和 &;headers 里的 User-Agent 用来告诉服务器“我是谁”。很多网站会拒绝没有正常 User-Agent 的请求,学会设置它能少踩很多坑。
五、POST 请求:把数据发出去
GET 是“要数据”,POST 是“交数据”,比如提交一个表单:
r = requests.post(TEST_URL, data={"name": "小明", "city": "深圳"}, timeout=10)
print(r.status_code)
print(r.json()["form"])
如果接口要求 JSON 格式,就把 data= 换成 json=,requests 会自动设置正确的 Content-Type,这个小区别在写接口调用时经常用到。
六、超时与异常,一个都不能少
网络请求随时可能失败,写代码时一定要把异常处理加上:
try:
r = requests.get(TEST_URL, timeout=5)
r.raise_for_status()
except requests.exceptions.Timeout:
print("请求超时了")
except requests.exceptions.ConnectionError:
print("网络连接失败")
except requests.exceptions.RequestException as e:
print("请求出错:", e)
timeout=5 的意思是最多等 5 秒,避免程序一直卡住;raise_for_status() 会把 404、500 这类错误状态码变成异常,方便统一处理。
七、新手最容易踩的四个坑
第一,不设超时。请求一旦卡住,整个程序都会停在那里,定时任务尤其要小心。
第二,中文乱码。如果页面出现乱码,可以先试试 r.encoding = "utf-8",或者用 r.apparent_encoding 让 requests 自动猜测编码。
第三,忽略证书警告。学习时看到证书问题,不要图省事直接关掉校验,生产环境更不能这样做。
第四,请求太频繁。练习时加一点延时,遵守网站的访问规则,既是对服务器的尊重,也能避免自己的账号被暂时封禁。
八、小结与下一步
今天的收获可以用一句话概括:requests.get(url, timeout=10) 就是 Python 联网的起点。掌握了状态码、响应体、参数、请求头和异常处理,你就已经会写第一个真正有用的网络程序了。
下一步可以试试:用 requests 请求一个公开的天气接口,把返回的 JSON 打印成好看的表格;或者把今天的代码封装成一个函数,输入网址就返回状态码和标题。把“跑通一次”变成“随手能用”,这门课才算真正入门。
- 点赞
- 收藏
- 关注作者
评论(0)