在 Python 中查找 URL 的方法有：使用 BeautifulSoup 提取 HTML 中带有特定属性的标签；使用正则表达式匹配带有 URL 的字符串；使用 Requests 库获取 HTML 响应并进一步提取 URL；使用 URLib 库访问 URL 并提取其组件。
如何在 Python 中发现 URL
在 Python 中，您可以使用各种方法查找 URL，这是网络爬虫的基础。
使用 BeautifulSoup
BeautifulSoup 是一个流行的 Python 库，用于提取 HTML 中的数据。它提供了一个 find_all() 函数，可以用来查找具有特定属性的标签，例如 href：
立即学习“Python免费学习笔记（深入）”；
from bs4 import BeautifulSoup html = "Example" soup = BeautifulSoup(html, 'html.parser') urls = [a['href'] for a in soup.find_all('a', href=True)]
使用正则表达式
正则表达式（regex）是一种模式匹配语言，可以用来查找字符串中的模式。您可以使用 re 模块来匹配带有 URL 的字符串：
import re text = "This is a URL: https://example.com" urls = re.findall(r'https?://\S+', text)
使用 Requests 库
Requests 库可以用来发送 HTTP 请求并获取响应。您可以获取 HTML 响应并使用 BeautifulSoup 或正则表达式进一步提取 URL：
import requests
from bs4 import BeautifulSoup
url = 'https://example.com'
response = requests.get(url)
html = response.text
soup = BeautifulSoup(html, 'html.parser')
urls = [a['href'] for a in soup.find_all('a', href=True)]使用 URLib 库
URLib 库提供了低级别的 URL 访问功能。您可以使用 urllib.parse 模块来提取 URL：
import urllib.parse url = 'https://example.com/path/to/file?query=string' parsed_url = urllib.parse.urlparse(url) print(parsed_url.scheme) # https print(parsed_url.netloc) # example.com print(parsed_url.path) # /path/to/file print(parsed_url.query) # query=string
这些只是在 Python 中查找 URL 的几种方法。根据您的特定需求，您可能需要使用不同的方法或它们的组合。
