Python请求头自定义教程 - 如何设置HTTP Headers

Python请求头自定义教程

在Python网络请求中，自定义HTTP请求头是模拟浏览器行为、防止反爬、传递认证信息的关键技术。本教程将教你如何灵活设置请求头。

为什么需要自定义请求头？

模拟浏览器行为，避免被网站识别为爬虫
传递认证信息（如API密钥）
设置内容类型（Content-Type）
管理缓存控制（Cache-Control）
处理跨域请求（CORS）

常用HTTP请求头字段

字段名	说明	示例值
User-Agent	客户端信息	Mozilla/5.0 (Windows NT 10.0; Win64; x64)
Referer	来源页面	https://www.example.com/page1
Accept	可接受的内容类型	application/json, text/html
Authorization	认证信息	Bearer token123
Cookie	会话信息	session_id=abc123

使用requests库自定义请求头

基本方法是通过headers参数传递字典对象

基本示例

import requests

# 定义自定义请求头
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36',
    'Referer': 'https://www.google.com/',
    'Accept-Language': 'zh-CN,zh;q=0.9,en;q=0.8',
}

# 发送带有自定义请求头的GET请求
response = requests.get('https://httpbin.org/headers', headers=headers)

# 打印响应内容
print(response.json())

设置Authorization请求头

import requests

# 设置认证信息
headers = {
    'Authorization': 'Bearer YOUR_ACCESS_TOKEN',
    'Content-Type': 'application/json'
}

# 发送POST请求
data = {'key': 'value'}
response = requests.post(
    'https://api.example.com/data', 
    headers=headers, 
    json=data
)

print(response.status_code)
print(response.json())