[PHP知识库]HTTP响应设置及PHP模拟HTTP请求

一：HTTP详解

1). HTTP相关了解

HTTP协议概念
HTTP协议，即超文本传输协议(Hypertext transfer protocol)。是一种详细规定了浏览器和万维网(WWW = World Wide Web)服务器之间互相通信的规则，通过因特网传送万维网文档的数据传送协议。
HTTP协议是用于从WWW服务器传输超文本到本地浏览器的传送协议。它可以使浏览器更加高效，使网络传输减少。它不仅保证计算机正确快速地传输超文本文档，还确定传输文档中的哪一部分，以及哪部分内容首先显示(如文本先于图形)等。

HTTP协议特点

• 客户/服务器模式：客户端（浏览器）/服务端
• 简单快速：客户向服务器请求服务时，只需传送请求方法和路径。由于HTTP协议简单，使得HTTP服务器的程序规模小，因而通信速度很快。
• 灵活：HTTP允许传输任意类型的数据对象（MIME类型）
• 无连接：无连接的含义是限制每次连接只处理一个请求。服务器处理完客户的请求，并收到客户的应答后，即断开连接。采用这种方式可以节省传输时间。
• 无状态：HTTP协议是无状态协议。无状态是指协议对于事务处理没有记忆能力。缺少状态意味着如果后续处理需要前面的信息，则它必须重传，这样可能导致每次连接传送的数据量增大。另一方面，在服务器不需要先前信息时它的应答就较快。

HTTP协议分类
http请求协议：浏览器向服务器发起请求的时候需要遵循的协议
http响应协议：服务器向浏览器发起响应的时候需要遵循的协议

2). HTTP请求

一个完整的http请求应该包括请求行，请求头以及请求体。

请求行
1）形式：请求方式 资源路径 协议版本号
2）GET https://www.baidu.com/ HTTP/1.1
请求行独占第一行

请求头
请求头就是各项协议内容：具体的协议内容不会每次都使用全部
常见请求头内容：
1）Host：请求的主机地址（必须）
2）Accept：当前请求能够接收服务器返回的类型（MIME类型）
3）Accept-Language：接收的语言
4）User-Agent：客户浏览器所在点的一些信息
5）Accept-Encoding：可接受的数据压缩格式

请求头不固定数量，每个请求协议也是独占一行，最后会有一行空行（用来区分请求头和请求体）

请求体
请求数据：POST请求会有请求体而GET请求没有。因为GET请求所有的数据都是跟在URL之后，会在请求行中的资源路径上体现。

下面是我使用fiddler对百度进行抓包得到的数据，因为现在的主流浏览器都会对http请求做处理，因此我只能使用fiddler获取原始的http请求。

GET https://www.baidu.com/ HTTP/1.1
Host: www.baidu.com
Connection: keep-alive
Upgrade-Insecure-Requests: 1
User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.107 Safari/537.36
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9
Sec-Fetch-Site: none
Sec-Fetch-Mode: navigate
Sec-Fetch-User: ?1
Sec-Fetch-Dest: document
sec-ch-ua: "Chromium";v="92", " Not A;Brand";v="99", "Google Chrome";v="92"
sec-ch-ua-mobile: ?0
Accept-Encoding: gzip, deflate, br
Accept-Language: en,zh-CN;q=0.9,zh;q=0.8

3). HTTP响应

与HTTP请求类似，一个完整的http响应也包括三部分：响应行，响应头以及响应体。

响应行
1）形式：协议版本号 状态码 状态消息（独占一行）
HTTP/1.1 200 ok
2）200 ok： 成功
3）403 Forbidden： 没权限访问
4）404 Not Found： 未找到页面
5）500 Server Internal Error： 服务器内部错误

响应头
响应头一个占一行，并且为了区分响应头和响应体，响应头后面应该先空一行再是响应体。
常见协议内容：
1）http协议版本、状态码：HTTP/1.1 200 OK
2）连接状态：Connection: keep-alive
3）响应数据压缩格式：Content-Encoding: gzip
4）内容类型(告诉浏览器对应的数据格式)：Content-Type: text/html;charset=utf-8
5）响应时间：Date: Thu, 29 Jul 2021 13:21:31 GMT
6）服务器信息：Server: BWS/1.1
7）设置的cookie信息：Set-Cookie

响应体
实际服务器响应给浏览器的内容

以下是我用fiddle对百度抓包的响应体数据:

HTTP/1.1 200 OK
Bdpagetype: 1
Bdqid: 0xf5445c5400006514
Cache-Control: private
Connection: keep-alive
Content-Encoding: gzip
Content-Type: text/html;charset=utf-8
Date: Thu, 29 Jul 2021 13:21:31 GMT
Expires: Thu, 29 Jul 2021 13:20:35 GMT
P3p: CP=" OTI DSP COR IVA OUR IND COM "
P3p: CP=" OTI DSP COR IVA OUR IND COM "
Server: BWS/1.1
Set-Cookie: BAIDUID=7FB5161F958DA8DA11245312F6CA57B0:FG=1; expires=Thu, 31-Dec-37 23:55:55 GMT; max-age=2147483647; path=/; domain=.baidu.com
Set-Cookie: BIDUPSID=7FB5161F958DA8DA11245312F6CA57B0; expires=Thu, 31-Dec-37 23:55:55 GMT; max-age=2147483647; path=/; domain=.baidu.com
Set-Cookie: PSTM=1627564891; expires=Thu, 31-Dec-37 23:55:55 GMT; max-age=2147483647; path=/; domain=.baidu.com
Set-Cookie: BAIDUID=7FB5161F958DA8DACC6F37A89191F334:FG=1; max-age=31536000; expires=Fri, 29-Jul-22 13:21:31 GMT; domain=.baidu.com; path=/; version=1; comment=bd
Set-Cookie: BDSVRTM=0; path=/
Set-Cookie: BD_HOME=1; path=/
Set-Cookie: H_PS_PSSID=34299_33802_34335_34278_34004_34092_34107_34094_26350_34242; path=/; domain=.baidu.com
Set-Cookie: BAIDUID_BFESS=7FB5161F958DA8DA11245312F6CA57B0:FG=1; Path=/; Domain=baidu.com; Expires=Thu, 31 Dec 2037 23:55:55 GMT; Max-Age=2147483647; Secure; SameSite=None
Strict-Transport-Security: max-age=172800
Traceid: 1627564891097109965817673352353555703060
X-Frame-Options: sameorigin
X-Ua-Compatible: IE=Edge,chrome=1
Transfer-Encoding: chunked

...
...
(此处省略响应体)

二：HTTP相应设置

PHP中针对HTTP协议（响应）进行了底层设计，可以通过函数header来实现修改HTTP响应（响应头）

注意事项：
1、 Header函数可以设计HTTP响应，因为HTTP协议特点是：响应行，响应头（空行结尾），响应体。认为通过header函数设计响应头的时候，不应该有任何内容输出，因为一旦产生内容输出（哪怕一个空格），系统都会认为响应头已经结束而响应体开始了，所以如果先输出内容后设置响应头（header使用），理论设置无效；
2、 在PHP5以后，增加程序缓存内容：允许服务器脚本在输出内容的时候，不直接返回浏览器而是现在服务器端使用程序缓存保留（php.ini中使用output_buffering），有了该内容之后，在程序缓存内会自动调整响应头和响应体（允许响应头在已经输出的内容之后再设置），但是此时会报错（警告）。
总结：header设置响应体之前不要有任何输出

Location：重定向，立即跳转（响应体不用解析）
浏览器在解析服务器响应的时候：先判定响应行，继续响应头，最后响应体：location是在响应头中，所以浏览器一旦见到该协议项，不再向下解析。

<?php
echo 'hello';
sleep(5); // 休眠5s后再执行后面代码
echo 'world';

呃…似乎使用该方法会被浏览器拦截

Refresh：重定向，定时跳转（响应体会解析）
延时重定向：浏览器会根据具体时间延迟后在访问指定跳转链接：浏览器在准备跳转访问之前，会继续解析HTTP协议（响应头和响应体），设置的延时单位为秒。

<?php
echo 'hello!';
header('Refresh:3;url=https://www.csdn.com');
echo 'world';

似乎使用这种方式也会被浏览器定义为不安全。

Content-type：内容类型，MIME类型
通过内容告知（MIME类型），浏览器正确解析内容

<?php
header('Content-type:text/html;charset:utf-8');
echo '你好';

Content-disposition：内容类型，MIME类型扩展，激活浏览器文件下载对话框
是 MIME 协议的扩展，MIME 协议指示 MIME 用户代理如何显示附加的文件。Content-disposition其实可以控制用户请求所得的内容存为一个文件的时候提供一个默认的文件名，文件直接在浏览器上显示或者在访问时弹出文件下载对话框。

<?php
// Content-disposition:attachment 是指以附件的形式下载
header('Content-disposition:attachment;filename=php.txt');

echo 'hello php';

三：PHP模拟HTTP请求

前提条件：HTTP协议的客户端/服务端模式，HTTP协议不局限于一定要浏览器访问。

PHP可以通过模拟HTTP协议发起HTTP请求
CURL是一个非常强大的开源库，支持很多协议，包括HTTP、FTP、TELNET等，我们使用它来发送HTTP请求。它给我们带来的好处是可以通过灵活的选项设置不同的HTTP协议参数，并且支持HTTPS。CURL可以根据URL前缀是“HTTP” 还是“HTTPS”自动选择是否加密发送内容。

开启curl库

curl库是php的一个标准库，因此可直接在php.ini中开启拓展。

实现curl

1). 建立连接(激活一个curl连接功能)：curl_init()

2). 设置请求选项： curl_setOpt()
语法格式为：

curl_setopt( resource $ch, int $option, mixed $value) : bool

ch ：由 curl_init() 返回的 cURL 句柄。option：需要设置的CURLOPT_XXX选项。 value：将设置在option选项上的值。

option常用可选参数：
CURLOPT_URL：连接对象
CURLOPT_RETURNTRANSFER:将服务器执行的结果（响应）以文件流的形式返回给请求界面（PHP脚本）
CURLOPT_POST：是否才有POST方式发起请求（默认请求是GET）
CURLOPT_POSTFIELDS：用来传递POST提交的数据，分为两种方式：字符串（name=abc&password=123）以及数组形式（array(‘name’=>’abc’,…)）
CURLOPT_HEADER：是否得到响应的header信息（响应头），默认不获取

3). 执行请求(得到服务器返回内容)： curl_exec()

4). 关闭连接： curl_close()

<?php
header('Content-type:text/html;charset:utf-8');

// 开启会话
$ch = curl_init();
//var_dump($ch);

// 设置连接选项
curl_setopt($ch, CURLOPT_URL, './sim_obj.php');  // 连接选项
curl_setopt($ch, CURLOPT_RETURNTRANSFER, TRUE);  // 文件流形式返回数据(不直接显示)
curl_setopt($ch, CURLOPT_HEADER, 0);  // 是否获取响应头信息

// 如果要使用post
curl_setopt($ch, CURLOPT_POST, TURE);
curl_setopt($ch, CURLOPT_POSTFIELDS, array());

// 执行
$content = curl_exec($ch);
echo $content;

// 关闭资源
curl_close($ch);

四：HTTP状态码