计算机网络
这篇笔记讲什么
从「两台机器怎么把一串字节可靠地送到对面」这个问题出发,讲清分层模型、IP 寻址与子网划分、TCP 可靠传输与拥塞控制、HTTP/HTTPS 的演进,最后落到能用
ping/curl/tcpdump亲手验证这些机制。读完你应该能:手算子网划分、解释三次握手为什么不是两次、画出拥塞窗口曲线、看懂一次 HTTPS 握手的报文交互、用命令定位「网站打不开」到底卡在哪一层。
一、是什么:网络就是「分层 + 协议」
计算机网络(Computer Network)是把多台独立主机用传输介质连接起来、按照事先约定的协议(Protocol)交换数据的系统。协议的本质是三件事的约定:
- 语法:报文的字段布局与编码,比如 IP 首部第 0 字节高 4 位是版本号。
- 语义:每个字段什么意思、收到后要做什么,比如 TCP 的 SYN=1 表示请求建连。
- 时序:谁先说、谁后说、超时怎么办,比如 TCP 的「三次握手」就是时序约定。
一句话理解分层
分层(Layering)解决的是复杂度问题:把「怎么在网线上发一个比特」和「怎么让浏览器拿到一个网页」拆成互不干扰的若干层,每层只依赖下一层提供的服务,并向上层提供更抽象的接口。
二、为什么需要分层
设想不分层:写一个网页程序,你要自己处理网卡驱动、电压编码、冲突检测、路由选路、丢包重传、字符编码……换一块网卡就要重写整个程序。
分层带来的三个实际收益:
| 收益 | 具体体现 |
|---|---|
| 独立演进 | 物理介质从双绞线换成光纤,HTTP 代码一行都不用改 |
| 分工实现 | 网卡厂商做物理层+链路层,操作系统做网络层+传输层,应用开发者只写应用层 |
| 故障隔离 | 「打不开网页」可以逐层排查:物理层灯亮不亮 → IP 能不能通 → 端口通不通 → HTTP 返回什么 |
代价是头部开销和层间冗余:一个 HTTP 请求最终被封装成 以太网头 | IP 头 | TCP 头 | HTTP 数据 | 以太网尾,小包场景下头部比有效载荷还大。这也是 HTTP/2、QUIC 想尽办法压缩头部的原因。
三、OSI 七层与 TCP/IP 四层对比
OSI(Open Systems Interconnection)是 ISO 提出的理论参考模型,TCP/IP 是工程上实际跑的模型。
| OSI 七层 | TCP/IP 四层 | 数据单元(PDU) | 职责 | 典型协议 / 设备 |
|---|---|---|---|---|
| 应用层 Application | 应用层 | 报文 Message | 面向具体业务 | HTTP、DNS、SMTP、FTP、SSH |
| 表示层 Presentation | 应用层 | — | 编码、压缩、加密 | TLS/SSL、JPEG、UTF-8 |
| 会话层 Session | 应用层 | — | 建立/维持/同步会话 | RPC、NetBIOS |
| 传输层 Transport | 传输层 | 报文段 Segment | 端到端、进程到进程 | TCP、UDP、QUIC |
| 网络层 Network | 网际层 | 分组 Packet | 主机到主机、跨网选路 | IP、ICMP、ARP*、OSPF、BGP |
| 数据链路层 Data Link | 网络接口层 | 帧 Frame | 相邻节点间成帧与差错检测 | 以太网、PPP、Wi-Fi、交换机 |
| 物理层 Physical | 网络接口层 | 比特 Bit | 比特流传输与电气规范 | 双绞线、光纤、中继器、集线器 |
ARP 到底属于哪一层
ARP(Address Resolution Protocol)在 OSI 里通常划到链路层或「网络层与链路层之间」,因为它要把 IP 地址解析成 MAC 地址,需要链路层广播,但又服务于网络层。考试和面试里两种说法都有人用,说清理由即可。
封装与解封装是分层的物理体现:发送端每下一层加一个头,接收端每上一层剥一个头。
发送端 接收端
应用层 [ HTTP 数据 ]
传输层 [TCP头][ HTTP 数据 ]
网络层 [IP头][TCP头][ HTTP 数据 ]
链路层 [帧头][IP头][TCP头][数据][帧尾]
↓ 物理层变成电信号/光信号 ↓
链路层 [帧头][IP头][TCP头][数据][帧尾]
网络层 [IP头][TCP头][ HTTP 数据 ]
传输层 [TCP头][ HTTP 数据 ]
应用层 [ HTTP 数据 ]
四、物理层与数据链路层要点
4.1 物理层
物理层只关心「0 和 1 怎么变成信号」,关键概念:
- 带宽(Bandwidth):单位 Hz 或 bps,理论上限由奈奎斯特(Nyquist)与香农(Shannon)定理给出:
其中 是带宽, 是码元离散电平数, 是信噪比。
- 双绞线:Cat5e 支持 1 Gbps / 100 m,Cat6a 支持 10 Gbps / 100 m。
- 光纤:单模传输距离可达数十公里,多模一般几百米。
- 集线器(Hub) 工作在物理层,把收到的信号向所有端口广播,所有主机共享同一冲突域,早已淘汰。
4.2 以太网帧与 MAC 地址
以太网(Ethernet)帧格式(DIX Ethernet V2):
| 字段 | 长度 | 说明 |
|---|---|---|
| 目的 MAC | 6 字节 | 接收方硬件地址 |
| 源 MAC | 6 字节 | 发送方硬件地址 |
| 类型 | 2 字节 | 0x0800=IPv4,0x0806=ARP,0x86DD=IPv6 |
| 数据 | 46–1500 字节 | 不足 46 要填充(Pad) |
| FCS | 4 字节 | CRC-32 校验,出错直接丢弃 |
MAC 地址(Media Access Control Address) 48 位,前 24 位是 OUI(厂商标识),后 24 位由厂商分配,例如 00:1A:2B:3C:4D:5E。MAC 只在同一广播域(局域网)内有效,跨网段后源/目的 MAC 会被逐跳改写。
MTU(Maximum Transmission Unit) 默认 1500 字节。IP 报文超过 MTU 就要分片(Fragmentation),这在工程上很麻烦(丢一片整包重传),所以 TCP 会通过 MSS 协商避免分片:
4.3 ARP:从 IP 找到 MAC
同网段通信必须知道对方的 MAC。ARP 的工作流程:
- 主机 A 要访问
192.168.1.20,查本地 ARP 缓存,命中则直接用。 - 未命中 → 广播 ARP 请求:
谁是 192.168.1.20?请告诉 192.168.1.10(目的 MAC 为ff:ff:ff:ff:ff:ff)。 - 目标主机单播应答自己的 MAC。
- A 把映射写入 ARP 缓存(Linux 默认约 30 秒~数分钟,条目状态分 REACHABLE/STALE 等)。
# 查看 ARP 缓存
ip neigh show # 现代 Linux 推荐
arp -a # 传统 net-tools
# 手动添加静态 ARP 条目(需 root,防止 ARP 欺骗时可用)
sudo ip neigh add 192.168.1.20 lladdr 00:1a:2b:3c:4d:5e dev eth0
ARP 没有认证
ARP 应答可以被任意主机伪造,这就是ARP 欺骗(ARP Spoofing),攻击者可把自己伪装成网关做中间人。防护手段是静态 ARP 绑定、DAI(Dynamic ARP Inspection)或改用 IPv6 的 NDP + SEND。
4.4 交换机 vs 路由器
| 对比项 | 交换机 Switch | 路由器 Router |
|---|---|---|
| 工作层次 | 数据链路层(二层) | 网络层(三层) |
| 转发依据 | MAC 地址表 | 路由表(目的 IP + 掩码) |
| 广播域 | 每个端口同一广播域(VLAN 可隔离) | 每个接口一个广播域 |
| 冲突域 | 每个端口独立 | 每个接口独立 |
| 主要用途 | 局域网内互连 | 连接不同网络 / 接入互联网 |
| 是否改 MAC | 不改,只做二层转发 | 每跳重写源/目的 MAC |
五、网络层:IP
5.1 IPv4 首部
| 字段 | 位数 | 作用 |
|---|---|---|
| 版本 | 4 | 4 表示 IPv4 |
| 首部长度 | 4 | 单位 4 字节,最小 5(即 20 字节) |
| 区分服务 DSCP | 8 | QoS 标记 |
| 总长度 | 16 | 首部+数据,最大 65535 字节 |
| 标识 / 标志 / 片偏移 | 16/3/13 | 分片与重组 |
| 生存时间 TTL | 8 | 每经一跳减 1,减到 0 丢弃并回 ICMP 超时 |
| 协议 | 8 | 6=TCP,17=UDP,1=ICMP |
| 首部检验和 | 16 | 只校验首部 |
| 源 IP / 目的 IP | 32/32 | 寻址 |
5.2 地址分类与私有地址
| 类别 | 首位模式 | 地址范围 | 默认掩码 | 用途 |
|---|---|---|---|---|
| A | 0 | 1.0.0.0 – 126.255.255.255 | /8 | 超大型网络 |
| B | 10 | 128.0.0.0 – 191.255.255.255 | /16 | 中型网络 |
| C | 110 | 192.0.0.0 – 223.255.255.255 | /24 | 小型网络 |
| D | 1110 | 224.0.0.0 – 239.255.255.255 | — | 组播 |
| E | 1111 | 240.0.0.0 – 255.255.255.255 | — | 保留/科研 |
RFC 1918 规定的私有地址(Private Address):
10.0.0.0/8172.16.0.0/12(即 172.16.0.0 – 172.31.255.255)192.168.0.0/16
特殊地址:127.0.0.0/8 环回、169.254.0.0/16 链路本地(DHCP 失败时自动配置)、0.0.0.0 表示本机所有接口、255.255.255.255 受限广播。
5.3 子网掩码与 CIDR 计算
CIDR(Classless Inter-Domain Routing) 用 /n 表示前 n 位是网络前缀。给定地址与前缀长度,主机数公式:
减 2 是因为扣掉网络地址(主机位全 0)和广播地址(主机位全 1)。/31(RFC 3021,点对点链路)和 /32(主机路由)是例外,不遵循此公式。
例题一:基础划分
给定
192.168.10.0/24,需要划分成 4 个等长子网。解:需要 ,故 ,新前缀 ,掩码
255.255.255.192,每子网 个可用主机。| 子网 | 网络地址 | 可用范围 | 广播地址 |
|---|---|---|---|
| 1 | 192.168.10.0/26 | .1 – .62 | 192.168.10.63 |
| 2 | 192.168.10.64/26 | .65 – .126 | 192.168.10.127 |
| 3 | 192.168.10.128/26 | .129 – .190 | 192.168.10.191 |
| 4 | 192.168.10.192/26 | .193 – .254 | 192.168.10.255 |
步长 = ,这是快速心算的关键。
例题二:变长划分(VLSM)
给定
172.16.0.0/16,三个部门分别需要 500、200、100 台主机,如何划分最省地址?解:按需求从大到小分配。
- 500 台:需要 ,(),前缀 →
172.16.0.0/23,范围 172.16.0.1–172.16.1.254,广播 172.16.1.255- 200 台:()→
172.16.2.0/24,范围 172.16.2.1–172.16.2.254- 100 台:()→
172.16.3.0/25,范围 172.16.3.1–172.16.3.126- 剩余
172.16.3.128/25留作扩展对比:若三个部门一律按 /24 等长划分,研发的 500 台就会不够用(/24 只有 254 个可用地址),必须再切一个 /24 给它,占用 512 个地址,总共消耗 3 个 /24;而 VLSM 方案只用了
172.16.0.0/23+172.16.2.0/24+172.16.3.0/25,节省出172.16.3.128/25。结论:按需分配比等长划分省地址,也更容易扩展。
子网划分的四个必会量:网络地址(主机位全 0)、广播地址(主机位全 1)、可用主机范围、下一子网基地址(网络地址 + 块大小)。
心算技巧
对
/n,块大小 。例:
/26→ 掩码第四字节192,块大小 64;/27→224,块大小 32;/28→240,块大小 16。要判断某地址属于哪个子网:把该字节除以块大小取整再乘回去。
192.168.10.100/26→ 余 36 → 网络地址192.168.10.64。
5.4 NAT
NAT(Network Address Translation) 让私有地址主机共享少量公网地址上网。最常见的形式是 NAPT / PAT(端口复用),用「IP + 端口」做映射:
| 内网地址 | 公网映射 | 说明 |
|---|---|---|
| 192.168.1.10:51001 | 203.0.113.5:40001 | 同一公网 IP 靠端口区分不同内网主机 |
| 192.168.1.11:51002 | 203.0.113.5:40002 | 端口耗尽时无法新建连接 |
# Linux 上典型的 SNAT / MASQUERADE 配置(nftables)
sudo nft add table ip nat
sudo nft add chain ip nat postrouting '{ type nat hook postrouting priority 100 ; }'
sudo nft add rule ip nat postrouting oifname "eth0" masquerade
# 查看当前连接跟踪表(NAT 映射的实际状态)
sudo conntrack -L | head
NAT 的副作用:破坏端到端透明性(外网无法主动连内网)、P2P 需要 STUN/TURN 打洞、部分协议(如主动 FTP、SIP)需要 ALG 辅助。
5.5 ICMP
ICMP(Internet Control Message Protocol) 是 IP 的差错与控制报文协议,不承载业务数据,封装在 IP 里(协议号 1)。常见类型:
| 类型 | 名称 | 触发场景 |
|---|---|---|
| 0 / 8 | Echo Reply / Echo Request | ping |
| 3 | Destination Unreachable | 端口不可达(code 3)常被用于 UDP 探测 |
| 11 | Time Exceeded | TTL 归零,traceroute 依赖它 |
| 5 | Redirect | 告知更优下一跳 |
很多网络禁 ICMP
云厂商安全组和防火墙常常丢弃 ICMP,所以
ping不通不代表服务不可用。判断可用性要结合 TCP 端口探测(nc -z、curl)。
5.6 IPv6 简介
- 地址 128 位,写成 8 组十六进制,可压缩连续 0:
2001:0db8:0000:0000:0000:ff00:0042:8329→2001:db8::ff00:42:8329。 - 首部固定 40 字节,取消首部校验和与分片字段(分片交给源端做 Path MTU 发现)。
- 没有广播,用组播(Multicast)与任播(Anycast)替代。
- 地址自动配置:SLAAC(无状态)或 DHCPv6。
- 内建 IPsec 支持(虽为可选实现)。
- 过渡技术:双栈(Dual Stack)、NAT64/DNS64、隧道(6to4、Teredo)。
# Linux 查看 IPv6 地址与路由
ip -6 addr show
ip -6 route show
ping -6 -c 3 2001:4860:4860::8888 # Google DNS 的 IPv6 地址
六、传输层
6.1 TCP 报文段结构
| 字段 | 长度 | 作用 |
|---|---|---|
| 源端口 / 目的端口 | 2+2 字节 | 定位进程 |
| 序号 seq | 4 字节 | 本报文段第一个数据字节的序号 |
| 确认号 ack | 4 字节 | 期望收到的下一个字节序号 |
| 数据偏移 | 4 位 | 首部长度,单位 4 字节 |
| 窗口 | 2 字节 | 接收窗口 rwnd,用于流量控制 |
| 检验和 | 2 字节 | 覆盖首部+数据+伪首部 |
| 紧急指针 | 2 字节 | 配合 URG |
| 控制位 | 6 位 | URG/ACK/PSH/RST/SYN/FIN |
关键点:TCP 是面向字节流的,seq 编号的是字节而不是报文段,这也是「粘包」问题的根源——TCP 不保留应用层的消息边界。
6.2 三次握手
客户端 服务器
|------ SYN, seq=x --------------->| CLOSED → LISTEN
| | SYN_RCVD
<----- SYN+ACK, seq=y, ack=x+1 ---
|------ ACK, ack=y+1 ------------->| ESTABLISHED
ESTABLISHED
为什么是三次而不是两次? 核心原因是双向确认 + 防止历史连接:
- 确认双方的收发能力:两次握手只能让服务器确认「客户端能发、自己能收」,无法确认「自己发的对方能收到」。
- 防止失效的历史 SYN:若客户端旧的 SYN 因网络滞留延迟到达,两次握手会让服务器直接建立连接并分配资源,而客户端其实并不想连;三次握手下客户端会回 RST 拒绝。
- 同步初始序号 ISN:双方都需要把自己的 ISN(Initial Sequence Number)告知对方并得到确认,这是可靠传输的起点。ISN 现在由 RFC 6528 规定的方法随机生成,防止序列号预测攻击。
SYN Flood 与 SYN Cookie
攻击者发送大量 SYN 不完成第三次握手,服务器
SYN_RCVD队列被占满。防御手段是 SYN Cookie:服务器不立即分配资源,而把状态编码进seq里,收到 ACK 再还原。
6.3 四次挥手
客户端 服务器
|------ FIN, seq=u --------------->| ESTABLISHED → CLOSE_WAIT
<----- ACK, ack=u+1 --------------
| | (服务器可能还有数据要发)
|<----- FIN, seq=w ----------------| LAST_ACK
|------ ACK, ack=w+1 ------------->| CLOSED
TIME_WAIT (2MSL) → CLOSED
为什么挥手是四次? 因为 TCP 是全双工的,两个方向要各自关闭。收到 FIN 只表示「对方没有数据要发了」,但自己可能还有数据没发完,所以 ACK 和 FIN 不能合并(除了延迟确认等特殊情况)。
TIME_WAIT 为什么等 2MSL?
- 确保最后一个 ACK 能到达对端。若 ACK 丢失,对端会重传 FIN,处于 TIME_WAIT 的一方还能重发 ACK;若直接关闭则会回 RST 导致对端异常。
- 让本次连接的残留报文在网络中自然消亡,避免它们被复用了相同四元组的新连接误收。MSL(Maximum Segment Lifetime)在 Linux 上硬编码为 60 秒,故 TIME_WAIT 默认 60 秒。
# 观察 TIME_WAIT 数量
ss -tan state time-wait | wc -l
# 作为客户端主动发起方时,可开启复用(生产环境谨慎)
sudo sysctl -w net.ipv4.tcp_tw_reuse=1
# 缩短 TIME_WAIT 上限(会加剧端口耗尽风险,需权衡)
sudo sysctl -w net.ipv4.tcp_max_tw_buckets=20000
两个高危参数
net.ipv4.tcp_tw_recycle在 NAT 环境下会导致大量连接失败(同一 NAT 源 IP 的时间戳不一致),已在 Linux 4.12 中移除。看到老教程推荐它请直接忽略。
6.4 滑动窗口与流量控制
滑动窗口(Sliding Window) 让发送方不必每发一个段就等 ACK,而是连续发送窗口内的多个段,显著提升吞吐。
其中 rwnd(Receive Window)由接收方通告,用于流量控制——防止发送太快把接收方缓冲区灌满;cwnd(Congestion Window)由发送方根据网络状况调整,用于拥塞控制。
要打满带宽,窗口至少要能覆盖一个 RTT 的传输量(带宽时延积):
例:100 Mbps 链路、RTT 50 ms,则 字节 ≈ 610 KB。窗口小于它,吞吐就被限制。这也是长肥管道(LFN)需要窗口缩放选项(Window Scaling,RFC 7323)的原因——TCP 首部窗口字段只有 16 位,最大 64 KB。
零窗口与坚持定时器
接收方缓冲区满时通告
rwnd=0,发送方停止发送并启动坚持定时器(Persist Timer)周期性发零窗口探测,避免双方互相等待造成死锁。
6.5 拥塞控制四大算法
TCP 拥塞控制(RFC 5681)包含四个算法,配合一条 随时间变化的曲线理解:
- 慢启动 Slow Start:
cwnd从 1 MSS(Linux 初始为 10 MSS,见 RFC 6928)开始,每收到一个 ACK 加 1 MSS,效果是每个 RTT 翻倍,指数增长直到cwnd >= ssthresh。 - 拥塞避免 Congestion Avoidance:超过
ssthresh后改为每个 RTT 只加 1 MSS,线性增长,谨慎探测可用带宽。 - 快重传 Fast Retransmit:收到 3 个重复 ACK(dupACK) 立刻重传丢失的段,不等超时定时器。因为能收到重复 ACK 说明网络没完全堵死,只是丢了个别包。
- 快恢复 Fast Recovery:快重传后不回到
cwnd=1,而是令ssthresh = cwnd/2、cwnd = ssthresh(或ssthresh+3),直接进入拥塞避免,避免吞吐断崖式下跌。
拥塞窗口曲线(横轴为传输轮次,纵轴为 cwnd):
cwnd
40 | ....... 快恢复后从 20 继续线性增长
32 | ..´ ‾‾‾·.
24 | ..´ ← 3 个 dupACK,ssthresh=cwnd/2=20
20 | ..´ (快重传 + 快恢复,不回到 1)
16 | ..´
12 | ..´ ← 达到 ssthresh=16,转入拥塞避免(斜率变小)
8 | ..´
4 | ..´ ← 慢启动:每个 RTT 翻倍(指数)
1 |_´________________________________________
RTT1 RTT2 RTT3 RTT4 RTT5 RTT6 RTT7
若发生超时(RTO 到期),则是「慢启动 + 拥塞避免」路径处理:ssthresh = cwnd/2,cwnd 重置为 1 MSS,曲线出现大幅下跌。
现代拥塞控制算法
Linux 默认已从 CUBIC 演进,新内核(6.x)默认
cubic,Google 提出的 BBR 基于带宽与时延建模而非丢包,在高丢包长链路上表现更好。查看与切换:```bash
sysctl net.ipv4.tcp_congestion_control # 查看当前
sysctl net.ipv4.tcp_available_congestion_control # 查看可用
sudo sysctl -w net.ipv4.tcp_congestion_control=bbr
```
6.6 TCP vs UDP
| 对比项 | TCP | UDP |
|---|---|---|
| 连接 | 面向连接(三次握手) | 无连接 |
| 可靠性 | 确认、重传、排序、去重 | 尽力而为,不保证 |
| 传输方式 | 字节流 | 数据报,保留边界 |
| 首部开销 | 20–60 字节 | 8 字节 |
| 流量/拥塞控制 | 有 | 无(QUIC 在用户态自己实现) |
| 速度 | 相对慢(握手 + 确认) | 快,时延低 |
| 一对多 | 仅一对一 | 支持广播/组播 |
| 典型应用 | HTTP/1.1、HTTP/2、SSH、SMTP、MySQL | DNS、DHCP、VoIP、视频直播、HTTP/3(QUIC) |
怎么选
需要「数据一个都不能少」选 TCP(文件、网页、数据库);需要「宁可丢也不卡」选 UDP(实时音视频、游戏);需要「可靠 + 低时延」考虑 QUIC(HTTP/3)——它在 UDP 上于用户态重建了可靠传输与多路复用。
七、应用层
7.1 DNS 解析过程
DNS(Domain Name System) 把域名翻译成 IP,核心是四类服务器:根(Root)、顶级域(TLD)、权威(Authoritative)、本地(Local/Recursive Resolver)。
递归查询(Recursive):客户端 → 本地 DNS,要求「你给我最终答案」。
迭代查询(Iterative):本地 DNS → 根/TLD/权威,每次只拿到「下一步该问谁」。
浏览器 → 本地DNS(递归) → 根服务器(迭代:去问 .com)
→ .com TLD(迭代:去问 ns.example.com)
→ 权威服务器(最终返回 A 记录)
完整解析前还有几步缓存:浏览器缓存 → 操作系统缓存 → hosts 文件 → 本地 DNS 缓存。
常见记录类型:
| 类型 | 含义 | 示例 |
|---|---|---|
| A | IPv4 地址 | example.com → 93.184.216.34 |
| AAAA | IPv6 地址 | example.com → 2606:2800:220:1:: |
| CNAME | 别名 | www.example.com → example.com |
| MX | 邮件交换 | 优先级 + 主机名 |
| NS | 权威服务器 | ns1.example.com |
| TXT | 文本(SPF/DKIM 验证) | v=spf1 ... |
dig example.com A +noall +answer
dig +trace example.com # 从根开始迭代,观察完整解析链路
dig @8.8.8.8 example.com # 指定 DNS 服务器
dig -x 93.184.216.34 # 反向解析 PTR
nslookup example.com 1.1.1.1 # Windows/跨平台常用
7.2 HTTP 方法、状态码与首部
HTTP 语义以 RFC 9110 为准。
| 方法 | 幂等 | 安全 | 语义 |
|---|---|---|---|
| GET | 是 | 是 | 获取资源,可被缓存 |
| HEAD | 是 | 是 | 只要首部,用于探活与检查大小 |
| POST | 否 | 否 | 提交数据,创建资源 |
| PUT | 是 | 否 | 全量替换资源 |
| PATCH | 否 | 否 | 部分更新 |
| DELETE | 是 | 否 | 删除资源 |
| OPTIONS | 是 | 是 | 查询支持的方法,CORS 预检用它 |
幂等 ≠ 安全
「安全」指不改服务器状态(GET/HEAD/OPTIONS);「幂等」指执行一次与多次效果相同(GET/PUT/DELETE)。POST 既不安全也不幂等,所以支付类接口要靠幂等键来补偿。
状态码分五类:
| 范围 | 含义 | 常见码 |
|---|---|---|
| 1xx | 信息 | 101 Switching Protocols(WebSocket 升级) |
| 2xx | 成功 | 200 OK、201 Created、204 No Content、206 Partial Content |
| 3xx | 重定向 | 301 永久(可缓存)、302 临时、304 Not Modified、307/308 保持方法与体 |
| 4xx | 客户端错误 | 400、401 未认证、403 无权限、404、405、409 冲突、429 限流 |
| 5xx | 服务端错误 | 500、502 网关错误、503 不可用、504 网关超时 |
常用首部:
Host: example.com # HTTP/1.1 必填,虚拟主机依赖它
User-Agent: curl/8.4.0
Accept: application/json
Content-Type: application/json; charset=utf-8
Content-Length: 27
Authorization: Bearer <token>
Cache-Control: max-age=3600, must-revalidate
ETag: "33a64df5" # 配合 If-None-Match 做协商缓存
Last-Modified: Wed, 21 Oct 2026 07:28:00 GMT
Set-Cookie: sid=abc123; HttpOnly; Secure; SameSite=Lax
7.3 HTTP/1.1 → HTTP/2 → HTTP/3 演进
| 对比项 | HTTP/1.1 | HTTP/2 | HTTP/3 |
|---|---|---|---|
| 规范 | RFC 9112 | RFC 9113 | RFC 9114 |
| 传输层 | TCP | TCP | QUIC(基于 UDP) |
| 多路复用 | 无(靠 6 个并发连接) | 有(Stream 交错) | 有,且无队头阻塞 |
| 头部压缩 | 无 | HPACK | QPACK |
| 队头阻塞 | 应用层严重 | TCP 层仍存在 | 基本消除 |
| 服务器推送 | 无 | 有(实践中逐渐弃用) | 有(同样受限) |
| 加密 | 可选 | 事实必选(浏览器要求 TLS) | 强制(QUIC 内建 TLS 1.3) |
| 连接建立 | TCP 1 RTT + TLS 2 RTT | TCP+TLS,可 TLS 1.3 降到 1 RTT | 1 RTT,会话恢复可 0 RTT |
关键理解点:
- HTTP/1.1 的队头阻塞(HOL Blocking):一个 TCP 连接上请求必须串行,前一个响应没来后面的要等。浏览器的对策是开多个连接 + 域名分片,代价是握手开销与拥塞窗口分散。
- HTTP/2 的多路复用把消息拆成带 Stream ID 的帧,在同一 TCP 连接上交错发送,解决了应用层 HOL,但TCP 层的丢包重传仍然会阻塞所有流。
- HTTP/3 用 QUIC 把可靠传输做在用户态,流之间独立重传,彻底绕开 TCP 层 HOL;同时把 TLS 1.3 握手合并进连接建立,弱网下改善明显。
# 查看服务端是否启用 HTTP/2 / HTTP/3
curl -I --http2 https://example.com
curl -I --http3 https://cloudflare.com # 需要 curl 8.x + HTTP/3 支持
nginx -V 2>&1 | tr ' ' '\n' | grep -E 'http_v2|http_v3'
nginx 开启 HTTP/2(自 1.25.1 起 listen 指令语法简化):
server {
listen 443 ssl;
http2 on; # nginx >= 1.25.1 的写法
server_name example.com;
ssl_certificate /etc/nginx/ssl/example.com.crt;
ssl_certificate_key /etc/nginx/ssl/example.com.key;
ssl_protocols TLSv1.2 TLSv1.3; # 具体可用参数以官方最新文档为准
location / {
proxy_pass http://127.0.0.1:8080;
}
}
版本敏感
nginx 各指令与参数随版本变化较快(如
http2 on;取代旧的listen ... http2),部署前请以 nginx 官方文档 为准。
7.4 HTTPS 与 TLS 握手
HTTPS = HTTP + TLS。TLS 1.3(RFC 8446)把握手压缩到 1 RTT。以「TLS 1.3 + 单向认证」为例:
客户端 服务器
--- ClientHello (支持的版本/套件, key_share) ---> <-- ServerHello (选定套件, key_share) <-- {EncryptedExtensions} <-- {Certificate} ← 证书在此后全部加密 <-- {CertificateVerify} ← 用私钥签名证明持有 <-- {Finished} --- {Finished} ------------------------------> <========= 应用数据(HTTP)===================>
三个关键概念:
- 非对称加密只用握手阶段:用于身份认证和协商出对称密钥(如 ECDHE 密钥交换),因为非对称运算慢。
- 对称加密用于数据传输:握手后双方用协商出的会话密钥做 AES-GCM 或 ChaCha20-Poly1305,既快又提供完整性。
- 证书链信任:服务器证书由中间 CA 签发,中间 CA 由根 CA 签发,根 CA 预置在操作系统/浏览器信任库中。客户端逐级验签直到可信根。可用
openssl亲手验证:
# 查看服务端证书链与协议版本
openssl s_client -connect example.com:443 -servername example.com -showcerts </dev/null
# 只看证书有效期与主体
echo | openssl s_client -connect example.com:443 -servername example.com 2>/dev/null \
| openssl x509 -noout -subject -issuer -dates
# 验证证书链是否可信
openssl verify -CAfile /etc/ssl/certs/ca-certificates.crt server.crt
证书校验必须开
代码里
verify=False/rejectUnauthorized: false会让 HTTPS 退化成「加密但不认证」,中间人可随意解密。仅在本地自签名调试时临时使用。
7.5 Cookie 与 Session
HTTP 本身无状态,Cookie 是补上状态的最早方案。
| 对比项 | Cookie | Session |
|---|---|---|
| 存储位置 | 客户端浏览器 | 服务端(内存/Redis/数据库) |
| 容量 | 约 4 KB/条 | 受服务端资源限制 |
| 安全性 | 可被 XSS 读取(未设 HttpOnly) | Session ID 泄露即被冒用 |
| 扩展性 | 天然分布式 | 需共享存储(Redis)或用粘性会话 |
| 失效控制 | 客户端可删,需服务端配合 | 服务端可立即销毁 |
# 服务端下发
Set-Cookie: sid=abc123; Path=/; HttpOnly; Secure; SameSite=Lax; Max-Age=3600
# 浏览器后续自动携带
Cookie: sid=abc123
三个属性务必设置
HttpOnly防 XSS 窃取、Secure只走 HTTPS、SameSite=Lax(或Strict)防 CSRF。详细对比见 后端-06-认证与授权。
八、常见排查命令
排查的基本原则是自下而上:物理/链路 → IP 可达 → 端口可达 → 应用响应。
8.1 ping
ping -c 4 example.com # 发 4 个 ICMP 包
ping -i 0.2 -c 20 10.0.0.1 # 加快频率压测丢包
ping -s 1472 -M do host # 探测 MTU(1472+28=1500),不分片
输出解读:time= 是 RTT,ttl= 可粗判对端系统(Linux 常见 64,Windows 常见 128,每经一跳减 1),packet loss 是丢包率。
8.2 traceroute / tracert
traceroute -T -p 443 example.com # Linux:用 TCP SYN 而非 ICMP(更易穿防火墙)
tracert example.com # Windows
mtr -rwzc 20 example.com # 持续统计,定位在哪一跳开始丢包
若中间几跳 * 而后续正常,通常只是该路由器不响应 ICMP,不必惊慌;关键看丢包是否从某一跳起持续到终点。
8.3 netstat / ss
ss -tulnp # 查看监听中的 TCP/UDP 端口及进程(需 root 看 PID)
ss -tan state established # 只看已建立连接
ss -s # 汇总统计(TIME_WAIT 数量一目了然)
ss -tan 'sport = :443' # 过滤源端口
# 老工具等价写法
netstat -anp | grep LISTEN
netstat -s | grep -i retrans # 重传统计,判断网络质量
8.4 curl
curl -v https://example.com # 打印请求/响应首部与 TLS 握手
curl -I https://example.com # 只要响应头
curl -o /dev/null -s -w '%{http_code} %{time_total}s\n' https://example.com
curl --resolve example.com:443:127.0.0.1 https://example.com # 绕过 DNS 直连本地
curl -X POST -H 'Content-Type: application/json' \
-d '{"name":"test"}' https://api.example.com/users
curl -w '\nDNS:%{time_namelookup} TCP:%{time_connect} TLS:%{time_appconnect} TTFB:%{time_starttransfer} Total:%{time_total}\n' \
-o /dev/null -s https://example.com
最后一条是分阶段耗时利器:time_namelookup 大 → DNS 慢;time_connect - time_namelookup 大 → TCP 握手慢;time_appconnect - time_connect 大 → TLS 慢;time_starttransfer 大 → 服务端处理慢。
8.5 dig
dig +short example.com
dig +trace example.com
dig example.com MX @8.8.8.8 +noall +answer
dig +dnssec example.com
输出里的 status: NOERROR 与 ANSWER SECTION 是重点;status: SERVFAIL 常表示上游解析失败或 DNSSEC 校验不通过。
8.6 tcpdump
# 抓 80 端口,只看首 64 字节,不解析域名(避免额外 DNS 流量)
sudo tcpdump -i eth0 -nn -s 64 'tcp port 80'
# 抓三次握手(只看 SYN/FIN/ACK)
sudo tcpdump -i any -nn 'tcp[tcpflags] & (tcp-syn|tcp-fin) != 0 and host 10.0.0.5'
# 存成 pcap 用 Wireshark 分析
sudo tcpdump -i eth0 -nn -w /tmp/http.pcap 'tcp port 443'
输出解读:Flags [S] 是 SYN,[S.] 是 SYN+ACK,[.] 是纯 ACK,[P.] 是 PSH+ACK,[F.] 是 FIN+ACK,[R] 是 RST。看到 [R] 通常意味着端口没监听或被防火墙拒绝。
排查流程图
1.
ip addr/ip route确认本机地址与网关。2.
ping 网关→ 同网段是否通。3.
ping 8.8.8.8→ 出网是否通(不走 DNS)。4.
dig example.com→ DNS 是否正常。5.
curl -v或nc -zv host port→ 端口与 TLS 是否正常。6.
tcpdump→ 抓包看报文到底发出去没有、有没有回。
九、注意事项与常见坑
坑一:把
ping不通当成服务挂了云安全组默认可能不放行 ICMP,而 80/443 是通的。判断服务可用性必须测业务端口:
curl -I或nc -zv host 443。
坑二:子网划分漏掉网络地址与广播地址
192.168.1.0/24只有 254 个可用地址。把.0或.255配给主机、或把网关配成广播地址,都是低级但高发的错误。用ipcalc或自写脚本复核:```bash
ipcalc 192.168.10.100/26 # 输出 Network/Broadcast/HostMin/HostMax
```
坑三:TIME_WAIT 被误认为「连接泄漏」
TIME_WAIT 是主动关闭方的正常状态,说明本端在正确工作。大量 TIME_WAIT 若不是端口耗尽,不需要处理。真正要警惕的是 CLOSE_WAIT 堆积——那说明应用层忘了调用
close(),是代码 bug。
坑四:长连接下客户端不设超时
服务端 keepalive 到期会主动关连接,客户端若在旧连接上发请求会偶发失败(经典 "connection reset by peer")。客户端必须配置连接池的
maxIdleTime小于服务端 keepalive 超时。
坑五:HTTP 缓存首部配错导致「改了代码不生效」
Cache-Control: max-age=31536000用在 HTML 上会导致用户长期看到旧页面。正确策略是:HTML 用no-cache(协商缓存),静态资源用带 hash 的文件名 + 长期强缓存。
坑六:DNS 改了不生效
受 TTL 影响,旧记录会缓存到过期。切换前应提前把 TTL 调小(如 300 秒),切换并稳定后再调回。另外本地还有 hosts 与浏览器缓存,排查时用
dig @8.8.8.8绕过本地递归。
十、练习题
练习 1:子网划分
公司拿到
10.20.0.0/16,需要给 4 个部门划分:研发 1000 台、测试 500 台、运维 200 台、行政 50 台。请给出各子网的网络地址与前缀,并说明剩余多少地址可分配。参考思路:从大到小取 满足需求的最小 :研发 (/22)、测试 (/23)、运维 (/24)、行政 (/26)。依次分配
10.20.0.0/22、10.20.4.0/23、10.20.6.0/24、10.20.7.0/26,剩余约 个地址。
练习 2:握手分析
用
tcpdump抓一次curl http://example.com的流量,指出三次握手的三个报文、HTTP 请求报文和四次挥手的四个报文。若只看到[S]没有[S.],可能是什么原因?参考思路:
[S]无应答说明 SYN 到达不了对端或被丢弃——防火墙 DROP、目标端口未监听、路由不可达、SYN Flood 防护误伤。
练习 3:拥塞控制计算
某连接
ssthresh初始为 16 MSS,cwnd从 1 MSS 开始。请问:慢启动持续几个 RTT?第 5 个 RTT 结束时cwnd是多少?若此时收到 3 个重复 ACK,快恢复后的cwnd与ssthresh各是多少?参考思路:,共 4 个 RTT 后达到
ssthresh;第 5 个 RTT 进入拥塞避免加 1,cwnd=17;快恢复令ssthresh = cwnd/2 ≈ 8,cwnd = ssthresh(部分实现取ssthresh+3)。
练习 4:DNS 排查
用户反馈「访问
www.example.com超时,但访问 IP 正常」。请列出至少 3 个可能原因与对应验证命令。参考思路:① DNS 服务器不可达 →
dig @8.8.8.8;② 本地 hosts 或缓存污染 → 检查/etc/hosts、ipconfig /flushdns;③ 权威服务器 NS 记录配错 →dig +trace;④ 域名被劫持/污染 → 对比多地解析结果。
练习 5:HTTP 版本与性能
一个页面有 100 个小资源。分别说明在 HTTP/1.1、HTTP/2、HTTP/3 下浏览器会如何加载,以及域名分片(Domain Sharding)在哪个版本下反而有害。
参考思路:HTTP/1.1 靠 6 连接并行 + 域名分片;HTTP/2 单连接多路复用,域名分片会破坏单连接复用、增加握手开销,因此在 HTTP/2 下应停止域名分片;HTTP/3 进一步消除 TCP 层 HOL。
十一、常见问题 FAQ
Q1:为什么我本地
curl localhost正常,用局域网 IP 就不行?常见原因是服务只监听了
127.0.0.1。检查ss -tlnp | grep <端口>,若显示127.0.0.1:8080则改成0.0.0.0:8080(如 uvicorn--host 0.0.0.0、nginxlisten 0.0.0.0:80)。其次检查防火墙与云安全组。
Q2:TCP 一定比 UDP 慢吗?
不一定。首次建连 TCP 多 1 个 RTT,但建立后两者发送速度差异很小;UDP 的「快」主要来自无重传与无拥塞控制,代价是丢包时业务自己扛。对丢包敏感的场景(如 HTTP/3 的 QUIC)反而在 UDP 上重建了可靠机制来获得更低的有效时延。
Q3:HTTPS 握手要几个 RTT,能优化吗?
TLS 1.2 完整握手 2 RTT,TLS 1.3 降到 1 RTT,会话恢复可 0-RTT。优化手段:启用 TLS 1.3、开启 OCSP Stapling 与 Session Ticket、就近部署 CDN、用 ECDSA 证书减小证书体积。
Q4:为什么服务器上有大量
TIME_WAIT却看不到ESTABLISHED增长?说明是短连接模式:每次请求都新建连接,用完立刻关闭,主动关闭方进入 TIME_WAIT。长久方案是启用 HTTP Keep-Alive 与连接池,而不是去调内核参数硬压 TIME_WAIT。
相关笔记
- 00-索引:全库导航,从「计算机基础」一节可以找到组网、系统与算法的前置知识。
- 操作系统:TCP/IP 协议栈运行在内核中,理解 socket、中断、零拷贝需要操作系统基础。
- 计算机组成原理:网络 I/O 与 DMA、内存带宽的关系,需要组成原理的存储层次知识。
- 前端-04-浏览器与HTTP:从浏览器视角看渲染流程、缓存与跨域,与本文应用层内容互补。
- 后端-01-HTTP与RESTfulAPI设计:把 HTTP 语义落到 API 设计规范上。
- 后端-09-后端安全与性能:TLS、限流、DDoS 防护等网络安全的工程实践。
- 工具-02-命令行与Shell:本文所有排查命令都依赖命令行基本功。
- 学习路线图:不确定下一步学什么时看这里。
参考来源
- RFC 791 — Internet Protocol(IPv4):https://www.rfc-editor.org/rfc/rfc791
- RFC 792 — Internet Control Message Protocol(ICMP):https://www.rfc-editor.org/rfc/rfc792
- RFC 826 — An Ethernet Address Resolution Protocol(ARP):https://www.rfc-editor.org/rfc/rfc826
- RFC 1918 — Address Allocation for Private Internets:https://www.rfc-editor.org/rfc/rfc1918
- RFC 9293 — Transmission Control Protocol(TCP,取代 RFC 793):https://www.rfc-editor.org/rfc/rfc9293
- RFC 5681 — TCP Congestion Control:https://www.rfc-editor.org/rfc/rfc5681
- RFC 6928 — Increasing TCP's Initial Window:https://www.rfc-editor.org/rfc/rfc6928
- RFC 7323 — TCP Extensions for High Performance(窗口缩放):https://www.rfc-editor.org/rfc/rfc7323
- RFC 8200 — Internet Protocol, Version 6 (IPv6) Specification:https://www.rfc-editor.org/rfc/rfc8200
- RFC 8446 — The Transport Layer Security (TLS) Protocol Version 1.3:https://www.rfc-editor.org/rfc/rfc8446
- RFC 9110 — HTTP Semantics:https://www.rfc-editor.org/rfc/rfc9110
- RFC 9112 — HTTP/1.1:https://www.rfc-editor.org/rfc/rfc9112
- RFC 9113 — HTTP/2:https://www.rfc-editor.org/rfc/rfc9113
- RFC 9114 — HTTP/3:https://www.rfc-editor.org/rfc/rfc9114
- MDN Web Docs — HTTP:https://developer.mozilla.org/zh-CN/docs/Web/HTTP
- MDN Web Docs — TCP 三次握手与四次挥手(连接管理):https://developer.mozilla.org/zh-CN/docs/Web/HTTP/Connection_management_in_HTTP_1.x
- nginx 官方文档:https://nginx.org/en/docs/
- nginx HTTP/2 模块(ngx_http_v2_module):https://nginx.org/en/docs/http/ngx_http_v2_module.html
版本敏感提示
内核参数(如
tcp_congestion_control的默认值)、nginx 指令语法、curl 的 HTTP/3 支持情况随版本变化较快,本文示例以写作时的常见版本为准,具体以官方最新文档为准。