Python 爬虫连接网站的方法有：1. 使用 urllib.request 模块打开和读取 URL；2. 使用 requests 库发出 HTTP 请求。
Python 爬虫连接
如何连接到网站？
Python 爬虫可以通过以下方法之一连接到网站：
- urllib.request 模块 (Python 2)：该模块提供了一个简单的方法来打开和读取 URL。
- requests 库 (Python 2 和 3)：这是一个更高级的库，它简化了 HTTP 请求，并提供了一些有用的特性。
使用 urllib.request 连接
立即学习“Python免费学习笔记（深入）”；
要使用 urllib.request 模块连接到网站，请使用以下步骤：
- 导入模块：
import urllib.request - 打开 URL：
req = urllib.request.urlopen('https://example.com') - 读取响应：
content = req.read()
使用 requests 库连接
要使用 requests 库连接到网站，请使用以下步骤：
- 导入库：
import requests - 发出 GET 请求：
res = requests.get('https://example.com') - 检查响应状态：
res.status_code - 获取响应内容：
res.text
示例代码
以下是使用 requests 库连接到网站的示例代码：
import requests
url = 'https://example.com'
res = requests.get(url)
if res.status_code == 200:
content = res.text
print(content)
else:
print('请求失败，状态码：', res.status_code)注意事项
- 确保目标网站允许爬虫访问。
- 使用
User-Agent标头伪装成浏览器，以免被检测为爬虫。 - 遵守礼仪，避免对目标网站造成过大负担。
