0

0

解决PHP cURL获取Gzip编码HTML响应乱码问题

花韻仙語

花韻仙語

发布时间:2025-11-21 11:12:24

|

152人浏览过

|

来源于php中文网

原创

解决PHP cURL获取Gzip编码HTML响应乱码问题

在使用php的curl库进行网络请求时,如果请求头中包含`accept-encoding: gzip`,服务器可能会返回gzip压缩的响应内容。这会导致直接输出时出现乱码或二进制数据。本教程将详细介绍如何识别并正确解码gzip压缩的html响应,确保获取到可读的原始html内容,并通过实例代码演示解决方案。

理解HTTP请求与Gzip编码

当客户端(如浏览器或cURL)向服务器发送HTTP请求时,可以通过Accept-Encoding请求头告知服务器它支持哪些内容编码方式。例如,Accept-Encoding: gzip, deflate, br表示客户端可以处理Gzip、Deflate和Brotli压缩的数据。如果服务器响应的数据量较大,为了节省带宽并加快传输速度,它可能会选择其中一种支持的编码方式(通常是Gzip)对响应体进行压缩,并在响应头中通过Content-Encoding: gzip告知客户端。

然而,如果客户端接收到Gzip压缩的数据后,没有进行相应的解压缩处理就直接输出,就会看到一串二进制乱码,而不是预期的HTML内容。这正是本教程要解决的核心问题。

PHP cURL与Gzip响应处理

在PHP中使用cURL发送请求时,如果像以下代码示例一样,在CURLOPT_HTTPHEADER中设置了accept-encoding: gzip,那么服务器很可能返回Gzip压缩的数据。

示例:原始问题代码

<?php

$header_request = array (
    "accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9",
    "accept-encoding: gzip", // 关键:告知服务器接受Gzip编码
    "accept-language: id-ID,id;q=0.9,en-US;q=0.8,en;q=0.7",
    "cookie: csrf_cookie_name=9316014c9d7860019da66a78edfaf926; _data_pop=115-1_274-1; ci_session=607f0be4e56b8b08ee2398b892f115c9e660192e; _data_cpc=1-2_15-2_190-4",
    "referer: https://ptc4btc.com/",
    "user-agent: Mozilla/5.0 (Linux; Android 7.0; Moto C Plus) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/94.0.4606.56 Mobile Safari/537.36",
    "upgrade-insecure-requests: 1"
);

$ch = curl_init();

curl_setopt_array($ch, array(
      CURLOPT_URL => "https://ptc4btc.com/dashboard",
      CURLOPT_RETURNTRANSFER => 1, // 返回字符串,而不是直接输出
      CURLOPT_FOLLOWLOCATION => 1, // 遵循重定向
      CURLOPT_HTTPHEADER => $header_request, // 设置自定义请求头
      CURLOPT_SSL_VERIFYPEER => 0, // 禁用SSL证书验证 (生产环境不推荐)
      CURLOPT_SSL_VERIFYHOST => 2, // 验证SSL主机名 (与CURLOPT_SSL_VERIFYPEER=0冲突,通常设为0或不设)
  ));

$exec = curl_exec($ch); // 执行cURL请求
echo($exec); // 直接输出,如果内容是Gzip压缩的,则会显示乱码

curl_close($ch); // 关闭cURL会话,注意这里应传入$ch而不是$exec

在上述代码中,echo($exec)直接输出了curl_exec返回的结果。如果服务器确实响应了Gzip编码的内容,那么$exec变量中存储的就是压缩后的二进制数据。

Dora
Dora

创建令人惊叹的3D动画网站,无需编写一行代码。

下载

立即学习PHP免费学习笔记(深入)”;

解决方案:使用gzdecode()解压缩

PHP提供了一个内置函数gzdecode(),专门用于解压Gzip格式的字符串。要解决乱码问题,只需在获取到响应内容后,对其进行解压缩即可。

<?php

// ... (CURLOPT_HTTPHEADER 和 curl_setopt_array 部分与上述代码相同) ...
$header_request = array (
    "accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9",
    "accept-encoding: gzip",
    "accept-language: id-ID,id;q=0.9,en-US;q=0.8,en;q=0.7",
    "cookie: csrf_cookie_name=9316014c9d7860019da66a78edfaf926; _data_pop=115-1_274-1; ci_session=607f0be4e56b8b08ee2398b892f15c9e660192e; _data_cpc=1-2_15-2_190-4",
    "referer: https://ptc4btc.com/",
    "user-agent: Mozilla/5.0 (Linux; Android 7.0; Moto C Plus) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/94.0.4606.56 Mobile Safari/537.36",
    "upgrade-insecure-requests: 1"
);

$ch = curl_init();

curl_setopt_array($ch, array(
      CURLOPT_URL => "https://ptc4btc.com/dashboard",
      CURLOPT_RETURNTRANSFER => 1,
      CURLOPT_FOLLOWLOCATION => 1,
      CURLOPT_HTTPHEADER => $header_request,
      CURLOPT_SSL_VERIFYPEER => 0,
      CURLOPT_SSL_VERIFYHOST => 0, // 建议:如果CURLOPT_SSL_VERIFYPEER为0,CURLOPT_SSL_VERIFYHOST也设为0
  ));

$exec = curl_exec($ch);

// 检查cURL执行是否成功
if (curl_errno($ch)) {
    echo 'cURL Error: ' . curl_error($ch);
} else {
    // 获取响应头信息,判断是否为Gzip编码
    $info = curl_getinfo($ch);
    $content_encoding = $info['content_encoding'] ?? ''; // PHP 7+

    // 如果响应头明确指出是gzip编码,则进行解压
    if (strpos($content_encoding, 'gzip') !== false) {
        $decoded_html = gzdecode($exec);
        echo $decoded_html;
    } else {
        // 否则直接输出原始响应(可能已经是未压缩的HTML)
        echo $exec;
    }
}

curl_close($ch);

关键改进点:

  1. gzdecode($exec): 这是解决问题的核心。它将$exec中Gzip压缩的数据解压为原始的HTML字符串。
  2. 错误处理: 增加了curl_errno($ch)的判断,可以在cURL请求失败时输出错误信息,这对于调试非常重要。
  3. 条件解压: 引入了对Content-Encoding响应头的检查。通过curl_getinfo($ch)获取响应信息,可以判断服务器是否实际返回了Gzip编码的内容。这样做更健壮,避免对非Gzip内容进行不必要的gzdecode操作。
  4. CURLOPT_SSL_VERIFYHOST: 当CURLOPT_SSL_VERIFYPEER设置为0(禁用证书验证)时,CURLOPT_SSL_VERIFYHOST通常也应设置为0,或者完全不设置,因为验证主机名依赖于证书验证。在生产环境中,强烈建议开启SSL证书验证,即CURLOPT_SSL_VERIFYPEER => 1和CURLOPT_SSL_VERIFYHOST => 2。

注意事项与最佳实践

  • 安全性: 在生产环境中,应尽量避免设置CURLOPT_SSL_VERIFYPEER => 0和CURLOPT_SSL_VERIFYHOST => 0,因为这会使你的应用程序面临中间人攻击的风险。正确的做法是确保服务器的SSL证书有效,并让cURL进行验证。
  • 资源管理: 每次cURL请求完成后,务必调用curl_close($ch)来释放cURL会话句柄所占用的资源。
  • 异常处理: 除了检查curl_errno(),还可以考虑使用try-catch块来处理更复杂的网络请求异常。
  • Accept-Encoding头部: 如果你不想处理Gzip解压,可以简单地从$header_request中移除"accept-encoding: gzip"这一行。这样,服务器通常会返回未压缩的HTML内容。
  • 其他编码: 除了Gzip,HTTP还支持Deflate、Brotli等其他压缩编码。如果服务器返回其他编码,你需要使用PHP中相应的解压函数(如gzinflate()或第三方库)。

总结

当PHP cURL获取到的HTML响应呈现乱码时,一个常见的原因是请求头中声明了支持Gzip编码,而服务器也相应地返回了Gzip压缩的数据。解决此问题的关键在于使用PHP的gzdecode()函数对接收到的响应内容进行解压缩。结合适当的错误处理和对Content-Encoding响应头的判断,可以构建出更健壮、更专业的cURL请求处理逻辑,确保始终获取到可读的原始HTML内容。

相关文章

HTML速学教程(入门课程)
HTML速学教程(入门课程)

HTML怎么学习?HTML怎么入门?HTML在哪学?HTML怎么学才快?不用担心,这里为大家提供了HTML速学教程(入门课程),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
curl_exec
curl_exec

curl_exec函数是PHP cURL函数列表中的一种,它的功能是执行一个cURL会话。给大家总结了一下php curl_exec函数的一些用法实例,这个函数应该在初始化一个cURL会话并且全部的选项都被设置后被调用。他的返回值成功时返回TRUE, 或者在失败时返回FALSE。

454

2023.06.14

linux常见下载安装工具
linux常见下载安装工具

linux常见下载安装工具有APT、YUM、DNF、Snapcraft、Flatpak、AppImage、Wget、Curl等。想了解更多linux常见下载安装工具相关内容,可以阅读本专题下面的文章。

183

2023.10.30

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

760

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

221

2023.09.04

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

1566

2023.10.24

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

649

2023.11.24

java读取文件转成字符串的方法
java读取文件转成字符串的方法

Java8引入了新的文件I/O API,使用java.nio.file.Files类读取文件内容更加方便。对于较旧版本的Java,可以使用java.io.FileReader和java.io.BufferedReader来读取文件。在这些方法中,你需要将文件路径替换为你的实际文件路径,并且可能需要处理可能的IOException异常。想了解更多java的相关内容,可以阅读本专题下面的文章。

1228

2024.03.22

php中定义字符串的方式
php中定义字符串的方式

php中定义字符串的方式:单引号;双引号;heredoc语法等等。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

1184

2024.04.29

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

3

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PHP课程
PHP课程

共137课时 | 13.3万人学习

JavaScript ES5基础线上课程教学
JavaScript ES5基础线上课程教学

共6课时 | 11.3万人学习

PHP新手语法线上课程教学
PHP新手语法线上课程教学

共13课时 | 1.0万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号