
本文探讨了在php中循环检查多个外部链接时,使用`get_headers()`可能导致的`err_connection_reset`问题。通过分析同步请求的局限性,文章详细介绍了如何利用curl multi接口实现高效、并发的链接状态检查,从而避免连接重置、提高脚本性能和稳定性。
在开发PHP脚本时,我们经常需要验证远程文件或资源的可用性。一种常见的场景是遍历一系列版本号或ID,检查对应URL是否存在。然而,当采用简单的同步请求方法(如get_headers())进行大量或频繁的外部链接检查时,即使引入了sleep()间隔,也可能遭遇ERR_CONNECTION_RESET错误,导致后续链接无法检查,甚至影响浏览器对这些链接的正常访问。这通常是由于服务器端的连接限制、防火墙规则、客户端连接池耗尽或操作系统层面的TCP连接管理问题所致。
原始的问题描述中,开发者尝试使用get_headers()函数在一个循环中检查多个URL。get_headers()会向指定的URL发送一个HTTP HEAD请求(或GET请求并仅获取头部),等待服务器响应。这个过程是同步阻塞的,意味着在当前请求完成并收到响应之前,脚本会暂停执行。
function checkAllUrlsSynchronously() {
$revisionNumber = 25;
$minorNumber = 2;
$buildNumber = 128;
$baseUrl = 'http://update.example.com/Files/Updates/';
for ($x = $buildNumber; $x > 0; $x--) {
$combinedUrl = $baseUrl . '6.' . $revisionNumber . '.' . $minorNumber . '.' . $x . '/application7_' . $revisionNumber . '_' . $minorNumber . '_' . $x . '_de_FullInstallerx64.exe';
// 记录日志
file_put_contents('log.txt', "Checking Build: $x - $combinedUrl\n", FILE_APPEND);
$urlHeaders = @get_headers($combinedUrl);
if(!$urlHeaders || strpos($urlHeaders[0], '404 Not Found') !== false) {
file_put_contents('log.txt', $combinedUrl . " - does not exist.\n", FILE_APPEND);
} else {
file_put_contents('log.txt', $combinedUrl . " - exists.\n", FILE_APPEND);
}
// 即使有延迟,频繁的同步请求仍可能触发问题
sleep(3);
}
}尽管代码中加入了sleep(3)来模拟请求间隔,但当请求数量庞大时,仍然可能遇到以下问题:
这些问题使得同步请求在大规模链接检查场景下变得不可靠且效率低下。
立即学习“PHP免费学习笔记(深入)”;
为了解决上述问题,PHP提供了cURL扩展的“Multi”接口,允许我们以非阻塞的方式同时管理多个cURL句柄,从而实现并发的HTTP请求。这种方式极大地提高了请求效率,并能更好地应对服务器端的限速策略。
cURL Multi的工作原理是,将多个独立的cURL请求句柄添加到cURL Multi句柄中,然后通过一个循环来轮询这些请求的状态,一旦有请求完成或有数据可用,cURL Multi就会通知脚本进行处理,而无需等待每个请求独立完成。
<?php
function checkAllUrlsEfficiently() {
$revisionNumber = 25;
$minorNumber = 2;
$buildNumber = 128;
$baseUrl = 'http://update.example.com/Files/Updates/';
// 1. 初始化cURL Multi句柄
$multiCurl = curl_multi_init();
$curlHandles = []; // 用于存储cURL句柄及其相关信息
// 2. 循环创建并配置单个cURL句柄,并添加到Multi句柄
for ($x = $buildNumber; $x > 0; $x--) {
$combinedUrl = $baseUrl . '6.' . $revisionNumber . '.' . $minorNumber . '.' . $x . '/application7_' . $revisionNumber . '_' . $minorNumber . '_' . $x . '_de_FullInstallerx64.exe';
$curl = curl_init();
curl_setopt($curl, CURLOPT_URL, $combinedUrl);
curl_setopt($curl, CURLOPT_FILETIME, true); // 获取文件时间
curl_setopt($curl, CURLOPT_NOBODY, true); // 发送HEAD请求,不下载内容
curl_setopt($curl, CURLOPT_RETURNTRANSFER, true); // 将响应作为字符串返回
curl_setopt($curl, CURLOPT_HEADER, true); // 包含响应头
// 可选:设置连接和执行超时,防止单个请求卡住
curl_setopt($curl, CURLOPT_CONNECTTIMEOUT, 10); // 连接超时10秒
curl_setopt($curl, CURLOPT_TIMEOUT, 30); // 执行超时30秒
// 3. 将单个cURL句柄添加到Multi句柄
curl_multi_add_handle($multiCurl, $curl);
$curlHandles[] = ['curl' => $curl, 'build' => $x, 'url' => $combinedUrl];
}
// 4. 执行并发请求
$running = null; // 用于跟踪仍在运行的请求数
do {
// 执行所有添加到Multi句柄的cURL请求
// $running 会被更新为当前仍在运行的请求数量
curl_multi_exec($multiCurl, $running);
// 如果有请求仍在运行,并且没有其他事件发生,可以稍微等待一下
// curl_multi_select() 会阻塞直到有活动发生或超时
if ($running > 0) {
curl_multi_select($multiCurl, 0.1); // 最多等待0.1秒
}
} while ($running > 0); // 当所有请求都完成后,循环结束
// 5. 处理结果
foreach ($curlHandles as $data) {
$curl = $data['curl'];
$build = $data['build'];
$combinedUrl = $data['url'];
file_put_contents('log.txt', "Checking Build: " . $build . "\n", FILE_APPEND);
$httpCode = curl_getinfo($curl, CURLINFO_HTTP_CODE); // 获取HTTP状态码
// $effectiveUrl = curl_getinfo($curl, CURLINFO_EFFECTIVE_URL); // 获取最终有效URL
if ($httpCode === 404) {
file_put_contents('log.txt', $combinedUrl . " - does not exist (HTTP 404).\n", FILE_APPEND);
} else if ($httpCode >= 200 && $httpCode < 300) {
// 2xx 状态码通常表示成功
file_put_contents('log.txt', $combinedUrl . " - exists (HTTP " . $httpCode . ").\n", FILE_APPEND);
} else {
// 其他状态码或错误
$error = curl_error($curl);
file_put_contents('log.txt', $combinedUrl . " - failed (HTTP " . $httpCode . ", Error: " . $error . ").\n", FILE_APPEND);
}
// 6. 从Multi句柄中移除单个cURL句柄并关闭
curl_multi_remove_handle($multiCurl, $curl);
curl_close($curl);
}
// 6. 关闭Multi句柄
curl_multi_close($multiCurl);
}
// 调用函数执行检查
checkAllUrlsEfficiently();
?>当PHP脚本需要高效、稳定地检查大量外部链接时,放弃同步的get_headers()方法,转而采用cURL Multi接口是解决ERR_CONNECTION_RESET等连接问题的最佳途径。通过并发请求,不仅可以显著提升性能,还能更好地管理网络资源,减少对目标服务器的冲击,从而构建更加健壮和可靠的外部资源验证系统。理解并正确应用cURL Multi的异步机制,是处理复杂网络请求场景的关键技能。
以上就是PHP高效多链接检查与ERR_CONNECTION_RESET解决方案的详细内容,更多请关注php中文网其它相关文章!
PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!
Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号