w wyl123ly 的博客
MD

计算机网络

41 KB 2026.10.11 原文件

计算机网络

这篇笔记讲什么

从「两台机器怎么把一串字节可靠地送到对面」这个问题出发,讲清分层模型、IP 寻址与子网划分、TCP 可靠传输与拥塞控制、HTTP/HTTPS 的演进,最后落到能用 ping / curl / tcpdump 亲手验证这些机制。

读完你应该能:手算子网划分、解释三次握手为什么不是两次、画出拥塞窗口曲线、看懂一次 HTTPS 握手的报文交互、用命令定位「网站打不开」到底卡在哪一层。

一、是什么:网络就是「分层 + 协议」

计算机网络(Computer Network)是把多台独立主机用传输介质连接起来、按照事先约定的协议(Protocol)交换数据的系统。协议的本质是三件事的约定:

  1. 语法:报文的字段布局与编码,比如 IP 首部第 0 字节高 4 位是版本号。
  2. 语义:每个字段什么意思、收到后要做什么,比如 TCP 的 SYN=1 表示请求建连。
  3. 时序:谁先说、谁后说、超时怎么办,比如 TCP 的「三次握手」就是时序约定。

一句话理解分层

分层(Layering)解决的是复杂度问题:把「怎么在网线上发一个比特」和「怎么让浏览器拿到一个网页」拆成互不干扰的若干层,每层只依赖下一层提供的服务,并向上层提供更抽象的接口。

二、为什么需要分层

设想不分层:写一个网页程序,你要自己处理网卡驱动、电压编码、冲突检测、路由选路、丢包重传、字符编码……换一块网卡就要重写整个程序。

分层带来的三个实际收益:

收益具体体现
独立演进物理介质从双绞线换成光纤,HTTP 代码一行都不用改
分工实现网卡厂商做物理层+链路层,操作系统做网络层+传输层,应用开发者只写应用层
故障隔离「打不开网页」可以逐层排查:物理层灯亮不亮 → IP 能不能通 → 端口通不通 → HTTP 返回什么

代价是头部开销和层间冗余:一个 HTTP 请求最终被封装成 以太网头 | IP 头 | TCP 头 | HTTP 数据 | 以太网尾,小包场景下头部比有效载荷还大。这也是 HTTP/2、QUIC 想尽办法压缩头部的原因。

三、OSI 七层与 TCP/IP 四层对比

OSI(Open Systems Interconnection)是 ISO 提出的理论参考模型,TCP/IP 是工程上实际跑的模型。

OSI 七层TCP/IP 四层数据单元(PDU)职责典型协议 / 设备
应用层 Application应用层报文 Message面向具体业务HTTP、DNS、SMTP、FTP、SSH
表示层 Presentation应用层—编码、压缩、加密TLS/SSL、JPEG、UTF-8
会话层 Session应用层—建立/维持/同步会话RPC、NetBIOS
传输层 Transport传输层报文段 Segment端到端、进程到进程TCP、UDP、QUIC
网络层 Network网际层分组 Packet主机到主机、跨网选路IP、ICMP、ARP*、OSPF、BGP
数据链路层 Data Link网络接口层帧 Frame相邻节点间成帧与差错检测以太网、PPP、Wi-Fi、交换机
物理层 Physical网络接口层比特 Bit比特流传输与电气规范双绞线、光纤、中继器、集线器

ARP 到底属于哪一层

ARP(Address Resolution Protocol)在 OSI 里通常划到链路层或「网络层与链路层之间」,因为它要把 IP 地址解析成 MAC 地址,需要链路层广播,但又服务于网络层。考试和面试里两种说法都有人用,说清理由即可。

封装与解封装是分层的物理体现:发送端每下一层加一个头,接收端每上一层剥一个头。

发送端                                          接收端
应用层   [        HTTP 数据        ]
传输层   [TCP头][   HTTP 数据     ]
网络层   [IP头][TCP头][ HTTP 数据 ]
链路层 [帧头][IP头][TCP头][数据][帧尾]
          ↓ 物理层变成电信号/光信号 ↓
链路层 [帧头][IP头][TCP头][数据][帧尾]
网络层   [IP头][TCP头][ HTTP 数据 ]
传输层   [TCP头][   HTTP 数据     ]
应用层   [        HTTP 数据        ]

四、物理层与数据链路层要点

4.1 物理层

物理层只关心「0 和 1 怎么变成信号」,关键概念:

  • 带宽(Bandwidth):单位 Hz 或 bps,理论上限由奈奎斯特(Nyquist)与香农(Shannon)定理给出:

其中 是带宽, 是码元离散电平数, 是信噪比。

  • 双绞线:Cat5e 支持 1 Gbps / 100 m,Cat6a 支持 10 Gbps / 100 m。
  • 光纤:单模传输距离可达数十公里,多模一般几百米。
  • 集线器(Hub) 工作在物理层,把收到的信号向所有端口广播,所有主机共享同一冲突域,早已淘汰。

4.2 以太网帧与 MAC 地址

以太网(Ethernet)帧格式(DIX Ethernet V2):

字段长度说明
目的 MAC6 字节接收方硬件地址
源 MAC6 字节发送方硬件地址
类型2 字节0x0800=IPv4,0x0806=ARP,0x86DD=IPv6
数据46–1500 字节不足 46 要填充(Pad)
FCS4 字节CRC-32 校验,出错直接丢弃

MAC 地址(Media Access Control Address) 48 位,前 24 位是 OUI(厂商标识),后 24 位由厂商分配,例如 00:1A:2B:3C:4D:5E。MAC 只在同一广播域(局域网)内有效,跨网段后源/目的 MAC 会被逐跳改写。

MTU(Maximum Transmission Unit) 默认 1500 字节。IP 报文超过 MTU 就要分片(Fragmentation),这在工程上很麻烦(丢一片整包重传),所以 TCP 会通过 MSS 协商避免分片:

4.3 ARP:从 IP 找到 MAC

同网段通信必须知道对方的 MAC。ARP 的工作流程:

  1. 主机 A 要访问 192.168.1.20,查本地 ARP 缓存,命中则直接用。
  2. 未命中 → 广播 ARP 请求:谁是 192.168.1.20?请告诉 192.168.1.10(目的 MAC 为 ff:ff:ff:ff:ff:ff)。
  3. 目标主机单播应答自己的 MAC。
  4. A 把映射写入 ARP 缓存(Linux 默认约 30 秒~数分钟,条目状态分 REACHABLE/STALE 等)。
# 查看 ARP 缓存
ip neigh show          # 现代 Linux 推荐
arp -a                 # 传统 net-tools

# 手动添加静态 ARP 条目(需 root,防止 ARP 欺骗时可用)
sudo ip neigh add 192.168.1.20 lladdr 00:1a:2b:3c:4d:5e dev eth0

ARP 没有认证

ARP 应答可以被任意主机伪造,这就是ARP 欺骗(ARP Spoofing),攻击者可把自己伪装成网关做中间人。防护手段是静态 ARP 绑定、DAI(Dynamic ARP Inspection)或改用 IPv6 的 NDP + SEND。

4.4 交换机 vs 路由器

对比项交换机 Switch路由器 Router
工作层次数据链路层(二层)网络层(三层)
转发依据MAC 地址表路由表(目的 IP + 掩码)
广播域每个端口同一广播域(VLAN 可隔离)每个接口一个广播域
冲突域每个端口独立每个接口独立
主要用途局域网内互连连接不同网络 / 接入互联网
是否改 MAC不改,只做二层转发每跳重写源/目的 MAC

五、网络层:IP

5.1 IPv4 首部

字段位数作用
版本44 表示 IPv4
首部长度4单位 4 字节,最小 5(即 20 字节)
区分服务 DSCP8QoS 标记
总长度16首部+数据,最大 65535 字节
标识 / 标志 / 片偏移16/3/13分片与重组
生存时间 TTL8每经一跳减 1,减到 0 丢弃并回 ICMP 超时
协议86=TCP,17=UDP,1=ICMP
首部检验和16只校验首部
源 IP / 目的 IP32/32寻址

5.2 地址分类与私有地址

类别首位模式地址范围默认掩码用途
A01.0.0.0 – 126.255.255.255/8超大型网络
B10128.0.0.0 – 191.255.255.255/16中型网络
C110192.0.0.0 – 223.255.255.255/24小型网络
D1110224.0.0.0 – 239.255.255.255—组播
E1111240.0.0.0 – 255.255.255.255—保留/科研

RFC 1918 规定的私有地址(Private Address):

  • 10.0.0.0/8
  • 172.16.0.0/12(即 172.16.0.0 – 172.31.255.255)
  • 192.168.0.0/16

特殊地址:127.0.0.0/8 环回、169.254.0.0/16 链路本地(DHCP 失败时自动配置)、0.0.0.0 表示本机所有接口、255.255.255.255 受限广播。

5.3 子网掩码与 CIDR 计算

CIDR(Classless Inter-Domain Routing) 用 /n 表示前 n 位是网络前缀。给定地址与前缀长度,主机数公式:

减 2 是因为扣掉网络地址(主机位全 0)和广播地址(主机位全 1)。/31(RFC 3021,点对点链路)和 /32(主机路由)是例外,不遵循此公式。

例题一:基础划分

给定 192.168.10.0/24,需要划分成 4 个等长子网。

解:需要 ,故 ,新前缀 ,掩码 255.255.255.192,每子网 个可用主机。

| 子网 | 网络地址 | 可用范围 | 广播地址 |

|---|---|---|---|

| 1 | 192.168.10.0/26 | .1 – .62 | 192.168.10.63 |

| 2 | 192.168.10.64/26 | .65 – .126 | 192.168.10.127 |

| 3 | 192.168.10.128/26 | .129 – .190 | 192.168.10.191 |

| 4 | 192.168.10.192/26 | .193 – .254 | 192.168.10.255 |

步长 = ,这是快速心算的关键。

例题二:变长划分(VLSM)

给定 172.16.0.0/16,三个部门分别需要 500、200、100 台主机,如何划分最省地址?

解:按需求从大到小分配。

- 500 台:需要 ,(),前缀 → 172.16.0.0/23,范围 172.16.0.1–172.16.1.254,广播 172.16.1.255

- 200 台:()→ 172.16.2.0/24,范围 172.16.2.1–172.16.2.254

- 100 台:()→ 172.16.3.0/25,范围 172.16.3.1–172.16.3.126

- 剩余 172.16.3.128/25 留作扩展

对比:若三个部门一律按 /24 等长划分,研发的 500 台就会不够用(/24 只有 254 个可用地址),必须再切一个 /24 给它,占用 512 个地址,总共消耗 3 个 /24;而 VLSM 方案只用了 172.16.0.0/23 + 172.16.2.0/24 + 172.16.3.0/25,节省出 172.16.3.128/25。结论:按需分配比等长划分省地址,也更容易扩展。

子网划分的四个必会量:网络地址(主机位全 0)、广播地址(主机位全 1)、可用主机范围、下一子网基地址(网络地址 + 块大小)。

心算技巧

对 /n,块大小 。

例:/26 → 掩码第四字节 192,块大小 64;/27 → 224,块大小 32;/28 → 240,块大小 16。

要判断某地址属于哪个子网:把该字节除以块大小取整再乘回去。192.168.10.100/26 → 余 36 → 网络地址 192.168.10.64。

5.4 NAT

NAT(Network Address Translation) 让私有地址主机共享少量公网地址上网。最常见的形式是 NAPT / PAT(端口复用),用「IP + 端口」做映射:

内网地址公网映射说明
192.168.1.10:51001203.0.113.5:40001同一公网 IP 靠端口区分不同内网主机
192.168.1.11:51002203.0.113.5:40002端口耗尽时无法新建连接
# Linux 上典型的 SNAT / MASQUERADE 配置(nftables)
sudo nft add table ip nat
sudo nft add chain ip nat postrouting '{ type nat hook postrouting priority 100 ; }'
sudo nft add rule ip nat postrouting oifname "eth0" masquerade

# 查看当前连接跟踪表(NAT 映射的实际状态)
sudo conntrack -L | head

NAT 的副作用:破坏端到端透明性(外网无法主动连内网)、P2P 需要 STUN/TURN 打洞、部分协议(如主动 FTP、SIP)需要 ALG 辅助。

5.5 ICMP

ICMP(Internet Control Message Protocol) 是 IP 的差错与控制报文协议,不承载业务数据,封装在 IP 里(协议号 1)。常见类型:

类型名称触发场景
0 / 8Echo Reply / Echo Requestping
3Destination Unreachable端口不可达(code 3)常被用于 UDP 探测
11Time ExceededTTL 归零,traceroute 依赖它
5Redirect告知更优下一跳

很多网络禁 ICMP

云厂商安全组和防火墙常常丢弃 ICMP,所以 ping 不通不代表服务不可用。判断可用性要结合 TCP 端口探测(nc -z、curl)。

5.6 IPv6 简介

  • 地址 128 位,写成 8 组十六进制,可压缩连续 0:2001:0db8:0000:0000:0000:ff00:0042:8329 → 2001:db8::ff00:42:8329。
  • 首部固定 40 字节,取消首部校验和与分片字段(分片交给源端做 Path MTU 发现)。
  • 没有广播,用组播(Multicast)与任播(Anycast)替代。
  • 地址自动配置:SLAAC(无状态)或 DHCPv6。
  • 内建 IPsec 支持(虽为可选实现)。
  • 过渡技术:双栈(Dual Stack)、NAT64/DNS64、隧道(6to4、Teredo)。
# Linux 查看 IPv6 地址与路由
ip -6 addr show
ip -6 route show
ping -6 -c 3 2001:4860:4860::8888     # Google DNS 的 IPv6 地址

六、传输层

6.1 TCP 报文段结构

字段长度作用
源端口 / 目的端口2+2 字节定位进程
序号 seq4 字节本报文段第一个数据字节的序号
确认号 ack4 字节期望收到的下一个字节序号
数据偏移4 位首部长度,单位 4 字节
窗口2 字节接收窗口 rwnd,用于流量控制
检验和2 字节覆盖首部+数据+伪首部
紧急指针2 字节配合 URG
控制位6 位URG/ACK/PSH/RST/SYN/FIN

关键点:TCP 是面向字节流的,seq 编号的是字节而不是报文段,这也是「粘包」问题的根源——TCP 不保留应用层的消息边界。

6.2 三次握手

客户端                                服务器
  |------ SYN, seq=x --------------->|   CLOSED → LISTEN
  |                                  |   SYN_RCVD
<----- SYN+ACK, seq=y, ack=x+1 ---
|------ ACK, ack=y+1 ------------->| ESTABLISHED
ESTABLISHED

为什么是三次而不是两次? 核心原因是双向确认 + 防止历史连接:

  1. 确认双方的收发能力:两次握手只能让服务器确认「客户端能发、自己能收」,无法确认「自己发的对方能收到」。
  2. 防止失效的历史 SYN:若客户端旧的 SYN 因网络滞留延迟到达,两次握手会让服务器直接建立连接并分配资源,而客户端其实并不想连;三次握手下客户端会回 RST 拒绝。
  3. 同步初始序号 ISN:双方都需要把自己的 ISN(Initial Sequence Number)告知对方并得到确认,这是可靠传输的起点。ISN 现在由 RFC 6528 规定的方法随机生成,防止序列号预测攻击。

SYN Flood 与 SYN Cookie

攻击者发送大量 SYN 不完成第三次握手,服务器 SYN_RCVD 队列被占满。防御手段是 SYN Cookie:服务器不立即分配资源,而把状态编码进 seq 里,收到 ACK 再还原。

6.3 四次挥手

客户端                                服务器
  |------ FIN, seq=u --------------->|   ESTABLISHED → CLOSE_WAIT
<----- ACK, ack=u+1 --------------
| | (服务器可能还有数据要发) |<----- FIN, seq=w ----------------| LAST_ACK |------ ACK, ack=w+1 ------------->| CLOSED
TIME_WAIT (2MSL) → CLOSED

为什么挥手是四次? 因为 TCP 是全双工的,两个方向要各自关闭。收到 FIN 只表示「对方没有数据要发了」,但自己可能还有数据没发完,所以 ACK 和 FIN 不能合并(除了延迟确认等特殊情况)。

TIME_WAIT 为什么等 2MSL?

  1. 确保最后一个 ACK 能到达对端。若 ACK 丢失,对端会重传 FIN,处于 TIME_WAIT 的一方还能重发 ACK;若直接关闭则会回 RST 导致对端异常。
  2. 让本次连接的残留报文在网络中自然消亡,避免它们被复用了相同四元组的新连接误收。MSL(Maximum Segment Lifetime)在 Linux 上硬编码为 60 秒,故 TIME_WAIT 默认 60 秒。

# 观察 TIME_WAIT 数量
ss -tan state time-wait | wc -l

# 作为客户端主动发起方时,可开启复用(生产环境谨慎)
sudo sysctl -w net.ipv4.tcp_tw_reuse=1

# 缩短 TIME_WAIT 上限(会加剧端口耗尽风险,需权衡)
sudo sysctl -w net.ipv4.tcp_max_tw_buckets=20000

两个高危参数

net.ipv4.tcp_tw_recycle 在 NAT 环境下会导致大量连接失败(同一 NAT 源 IP 的时间戳不一致),已在 Linux 4.12 中移除。看到老教程推荐它请直接忽略。

6.4 滑动窗口与流量控制

滑动窗口(Sliding Window) 让发送方不必每发一个段就等 ACK,而是连续发送窗口内的多个段,显著提升吞吐。

其中 rwnd(Receive Window)由接收方通告,用于流量控制——防止发送太快把接收方缓冲区灌满;cwnd(Congestion Window)由发送方根据网络状况调整,用于拥塞控制。

要打满带宽,窗口至少要能覆盖一个 RTT 的传输量(带宽时延积):

例:100 Mbps 链路、RTT 50 ms,则 字节 ≈ 610 KB。窗口小于它,吞吐就被限制。这也是长肥管道(LFN)需要窗口缩放选项(Window Scaling,RFC 7323)的原因——TCP 首部窗口字段只有 16 位,最大 64 KB。

零窗口与坚持定时器

接收方缓冲区满时通告 rwnd=0,发送方停止发送并启动坚持定时器(Persist Timer)周期性发零窗口探测,避免双方互相等待造成死锁。

6.5 拥塞控制四大算法

TCP 拥塞控制(RFC 5681)包含四个算法,配合一条 随时间变化的曲线理解:

  1. 慢启动 Slow Start:cwnd 从 1 MSS(Linux 初始为 10 MSS,见 RFC 6928)开始,每收到一个 ACK 加 1 MSS,效果是每个 RTT 翻倍,指数增长直到 cwnd >= ssthresh。
  2. 拥塞避免 Congestion Avoidance:超过 ssthresh 后改为每个 RTT 只加 1 MSS,线性增长,谨慎探测可用带宽。
  3. 快重传 Fast Retransmit:收到 3 个重复 ACK(dupACK) 立刻重传丢失的段,不等超时定时器。因为能收到重复 ACK 说明网络没完全堵死,只是丢了个别包。
  4. 快恢复 Fast Recovery:快重传后不回到 cwnd=1,而是令 ssthresh = cwnd/2、cwnd = ssthresh(或 ssthresh+3),直接进入拥塞避免,避免吞吐断崖式下跌。

拥塞窗口曲线(横轴为传输轮次,纵轴为 cwnd):

cwnd
 40 |                    .......  快恢复后从 20 继续线性增长
 32 |                 ..´      ‾‾‾·.
 24 |              ..´   ← 3 个 dupACK,ssthresh=cwnd/2=20
 20 |           ..´          (快重传 + 快恢复,不回到 1)
 16 |        ..´
 12 |     ..´   ← 达到 ssthresh=16,转入拥塞避免(斜率变小)
  8 |   ..´
  4 | ..´   ← 慢启动:每个 RTT 翻倍(指数)
  1 |_´________________________________________
     RTT1  RTT2  RTT3  RTT4  RTT5  RTT6  RTT7

若发生超时(RTO 到期),则是「慢启动 + 拥塞避免」路径处理:ssthresh = cwnd/2,cwnd 重置为 1 MSS,曲线出现大幅下跌。

现代拥塞控制算法

Linux 默认已从 CUBIC 演进,新内核(6.x)默认 cubic,Google 提出的 BBR 基于带宽与时延建模而非丢包,在高丢包长链路上表现更好。查看与切换:

```bash

sysctl net.ipv4.tcp_congestion_control # 查看当前

sysctl net.ipv4.tcp_available_congestion_control # 查看可用

sudo sysctl -w net.ipv4.tcp_congestion_control=bbr

```

6.6 TCP vs UDP

对比项TCPUDP
连接面向连接(三次握手)无连接
可靠性确认、重传、排序、去重尽力而为,不保证
传输方式字节流数据报,保留边界
首部开销20–60 字节8 字节
流量/拥塞控制有无(QUIC 在用户态自己实现)
速度相对慢(握手 + 确认)快,时延低
一对多仅一对一支持广播/组播
典型应用HTTP/1.1、HTTP/2、SSH、SMTP、MySQLDNS、DHCP、VoIP、视频直播、HTTP/3(QUIC)

怎么选

需要「数据一个都不能少」选 TCP(文件、网页、数据库);需要「宁可丢也不卡」选 UDP(实时音视频、游戏);需要「可靠 + 低时延」考虑 QUIC(HTTP/3)——它在 UDP 上于用户态重建了可靠传输与多路复用。

七、应用层

7.1 DNS 解析过程

DNS(Domain Name System) 把域名翻译成 IP,核心是四类服务器:根(Root)、顶级域(TLD)、权威(Authoritative)、本地(Local/Recursive Resolver)。

递归查询(Recursive):客户端 → 本地 DNS,要求「你给我最终答案」。

迭代查询(Iterative):本地 DNS → 根/TLD/权威,每次只拿到「下一步该问谁」。

浏览器 → 本地DNS(递归) → 根服务器(迭代:去问 .com)
                       → .com TLD(迭代:去问 ns.example.com)
                       → 权威服务器(最终返回 A 记录)

完整解析前还有几步缓存:浏览器缓存 → 操作系统缓存 → hosts 文件 → 本地 DNS 缓存。

常见记录类型:

类型含义示例
AIPv4 地址example.com → 93.184.216.34
AAAAIPv6 地址example.com → 2606:2800:220:1::
CNAME别名www.example.com → example.com
MX邮件交换优先级 + 主机名
NS权威服务器ns1.example.com
TXT文本(SPF/DKIM 验证)v=spf1 ...
dig example.com A +noall +answer
dig +trace example.com          # 从根开始迭代,观察完整解析链路
dig @8.8.8.8 example.com        # 指定 DNS 服务器
dig -x 93.184.216.34            # 反向解析 PTR
nslookup example.com 1.1.1.1    # Windows/跨平台常用

7.2 HTTP 方法、状态码与首部

HTTP 语义以 RFC 9110 为准。

方法幂等安全语义
GET是是获取资源,可被缓存
HEAD是是只要首部,用于探活与检查大小
POST否否提交数据,创建资源
PUT是否全量替换资源
PATCH否否部分更新
DELETE是否删除资源
OPTIONS是是查询支持的方法,CORS 预检用它

幂等 ≠ 安全

「安全」指不改服务器状态(GET/HEAD/OPTIONS);「幂等」指执行一次与多次效果相同(GET/PUT/DELETE)。POST 既不安全也不幂等,所以支付类接口要靠幂等键来补偿。

状态码分五类:

范围含义常见码
1xx信息101 Switching Protocols(WebSocket 升级)
2xx成功200 OK、201 Created、204 No Content、206 Partial Content
3xx重定向301 永久(可缓存)、302 临时、304 Not Modified、307/308 保持方法与体
4xx客户端错误400、401 未认证、403 无权限、404、405、409 冲突、429 限流
5xx服务端错误500、502 网关错误、503 不可用、504 网关超时

常用首部:

Host: example.com                       # HTTP/1.1 必填,虚拟主机依赖它
User-Agent: curl/8.4.0
Accept: application/json
Content-Type: application/json; charset=utf-8
Content-Length: 27
Authorization: Bearer <token>
Cache-Control: max-age=3600, must-revalidate
ETag: "33a64df5"                        # 配合 If-None-Match 做协商缓存
Last-Modified: Wed, 21 Oct 2026 07:28:00 GMT
Set-Cookie: sid=abc123; HttpOnly; Secure; SameSite=Lax

7.3 HTTP/1.1 → HTTP/2 → HTTP/3 演进

对比项HTTP/1.1HTTP/2HTTP/3
规范RFC 9112RFC 9113RFC 9114
传输层TCPTCPQUIC(基于 UDP)
多路复用无(靠 6 个并发连接)有(Stream 交错)有,且无队头阻塞
头部压缩无HPACKQPACK
队头阻塞应用层严重TCP 层仍存在基本消除
服务器推送无有(实践中逐渐弃用)有(同样受限)
加密可选事实必选(浏览器要求 TLS)强制(QUIC 内建 TLS 1.3)
连接建立TCP 1 RTT + TLS 2 RTTTCP+TLS,可 TLS 1.3 降到 1 RTT1 RTT,会话恢复可 0 RTT

关键理解点:

  • HTTP/1.1 的队头阻塞(HOL Blocking):一个 TCP 连接上请求必须串行,前一个响应没来后面的要等。浏览器的对策是开多个连接 + 域名分片,代价是握手开销与拥塞窗口分散。
  • HTTP/2 的多路复用把消息拆成带 Stream ID 的帧,在同一 TCP 连接上交错发送,解决了应用层 HOL,但TCP 层的丢包重传仍然会阻塞所有流。
  • HTTP/3 用 QUIC 把可靠传输做在用户态,流之间独立重传,彻底绕开 TCP 层 HOL;同时把 TLS 1.3 握手合并进连接建立,弱网下改善明显。
# 查看服务端是否启用 HTTP/2 / HTTP/3
curl -I --http2 https://example.com
curl -I --http3 https://cloudflare.com     # 需要 curl 8.x + HTTP/3 支持
nginx -V 2>&1 | tr ' ' '\n' | grep -E 'http_v2|http_v3'

nginx 开启 HTTP/2(自 1.25.1 起 listen 指令语法简化):

server {
    listen 443 ssl;
    http2 on;                 # nginx >= 1.25.1 的写法
    server_name example.com;

    ssl_certificate     /etc/nginx/ssl/example.com.crt;
    ssl_certificate_key /etc/nginx/ssl/example.com.key;
    ssl_protocols       TLSv1.2 TLSv1.3;   # 具体可用参数以官方最新文档为准

    location / {
        proxy_pass http://127.0.0.1:8080;
    }
}

版本敏感

nginx 各指令与参数随版本变化较快(如 http2 on; 取代旧的 listen ... http2),部署前请以 nginx 官方文档 为准。

7.4 HTTPS 与 TLS 握手

HTTPS = HTTP + TLS。TLS 1.3(RFC 8446)把握手压缩到 1 RTT。以「TLS 1.3 + 单向认证」为例:

客户端                                        服务器
--- ClientHello (支持的版本/套件, key_share) --->
<-- ServerHello (选定套件, key_share)
<-- {EncryptedExtensions}
<-- {Certificate} ← 证书在此后全部加密
<-- {CertificateVerify} ← 用私钥签名证明持有
<-- {Finished}
--- {Finished} ------------------------------>
<========= 应用数据(HTTP)===================>

三个关键概念:

  1. 非对称加密只用握手阶段:用于身份认证和协商出对称密钥(如 ECDHE 密钥交换),因为非对称运算慢。
  2. 对称加密用于数据传输:握手后双方用协商出的会话密钥做 AES-GCM 或 ChaCha20-Poly1305,既快又提供完整性。
  3. 证书链信任:服务器证书由中间 CA 签发,中间 CA 由根 CA 签发,根 CA 预置在操作系统/浏览器信任库中。客户端逐级验签直到可信根。可用 openssl 亲手验证:
# 查看服务端证书链与协议版本
openssl s_client -connect example.com:443 -servername example.com -showcerts </dev/null

# 只看证书有效期与主体
echo | openssl s_client -connect example.com:443 -servername example.com 2>/dev/null \
  | openssl x509 -noout -subject -issuer -dates

# 验证证书链是否可信
openssl verify -CAfile /etc/ssl/certs/ca-certificates.crt server.crt

证书校验必须开

代码里 verify=False / rejectUnauthorized: false 会让 HTTPS 退化成「加密但不认证」,中间人可随意解密。仅在本地自签名调试时临时使用。

HTTP 本身无状态,Cookie 是补上状态的最早方案。

对比项CookieSession
存储位置客户端浏览器服务端(内存/Redis/数据库)
容量约 4 KB/条受服务端资源限制
安全性可被 XSS 读取(未设 HttpOnly)Session ID 泄露即被冒用
扩展性天然分布式需共享存储(Redis)或用粘性会话
失效控制客户端可删,需服务端配合服务端可立即销毁
# 服务端下发
Set-Cookie: sid=abc123; Path=/; HttpOnly; Secure; SameSite=Lax; Max-Age=3600

# 浏览器后续自动携带
Cookie: sid=abc123

三个属性务必设置

HttpOnly 防 XSS 窃取、Secure 只走 HTTPS、SameSite=Lax(或 Strict)防 CSRF。

详细对比见 后端-06-认证与授权。

八、常见排查命令

排查的基本原则是自下而上:物理/链路 → IP 可达 → 端口可达 → 应用响应。

8.1 ping

ping -c 4 example.com          # 发 4 个 ICMP 包
ping -i 0.2 -c 20 10.0.0.1     # 加快频率压测丢包
ping -s 1472 -M do host        # 探测 MTU(1472+28=1500),不分片

输出解读:time= 是 RTT,ttl= 可粗判对端系统(Linux 常见 64,Windows 常见 128,每经一跳减 1),packet loss 是丢包率。

8.2 traceroute / tracert

traceroute -T -p 443 example.com    # Linux:用 TCP SYN 而非 ICMP(更易穿防火墙)
tracert example.com                 # Windows
mtr -rwzc 20 example.com            # 持续统计,定位在哪一跳开始丢包

若中间几跳 * 而后续正常,通常只是该路由器不响应 ICMP,不必惊慌;关键看丢包是否从某一跳起持续到终点。

8.3 netstat / ss

ss -tulnp                  # 查看监听中的 TCP/UDP 端口及进程(需 root 看 PID)
ss -tan state established  # 只看已建立连接
ss -s                      # 汇总统计(TIME_WAIT 数量一目了然)
ss -tan 'sport = :443'     # 过滤源端口

# 老工具等价写法
netstat -anp | grep LISTEN
netstat -s | grep -i retrans   # 重传统计,判断网络质量

8.4 curl

curl -v https://example.com                     # 打印请求/响应首部与 TLS 握手
curl -I https://example.com                     # 只要响应头
curl -o /dev/null -s -w '%{http_code} %{time_total}s\n' https://example.com
curl --resolve example.com:443:127.0.0.1 https://example.com   # 绕过 DNS 直连本地
curl -X POST -H 'Content-Type: application/json' \
     -d '{"name":"test"}' https://api.example.com/users
curl -w '\nDNS:%{time_namelookup} TCP:%{time_connect} TLS:%{time_appconnect} TTFB:%{time_starttransfer} Total:%{time_total}\n' \
     -o /dev/null -s https://example.com

最后一条是分阶段耗时利器:time_namelookup 大 → DNS 慢;time_connect - time_namelookup 大 → TCP 握手慢;time_appconnect - time_connect 大 → TLS 慢;time_starttransfer 大 → 服务端处理慢。

8.5 dig

dig +short example.com
dig +trace example.com
dig example.com MX @8.8.8.8 +noall +answer
dig +dnssec example.com

输出里的 status: NOERROR 与 ANSWER SECTION 是重点;status: SERVFAIL 常表示上游解析失败或 DNSSEC 校验不通过。

8.6 tcpdump

# 抓 80 端口,只看首 64 字节,不解析域名(避免额外 DNS 流量)
sudo tcpdump -i eth0 -nn -s 64 'tcp port 80'

# 抓三次握手(只看 SYN/FIN/ACK)
sudo tcpdump -i any -nn 'tcp[tcpflags] & (tcp-syn|tcp-fin) != 0 and host 10.0.0.5'

# 存成 pcap 用 Wireshark 分析
sudo tcpdump -i eth0 -nn -w /tmp/http.pcap 'tcp port 443'

输出解读:Flags [S] 是 SYN,[S.] 是 SYN+ACK,[.] 是纯 ACK,[P.] 是 PSH+ACK,[F.] 是 FIN+ACK,[R] 是 RST。看到 [R] 通常意味着端口没监听或被防火墙拒绝。

排查流程图

1. ip addr / ip route 确认本机地址与网关。

2. ping 网关 → 同网段是否通。

3. ping 8.8.8.8 → 出网是否通(不走 DNS)。

4. dig example.com → DNS 是否正常。

5. curl -v 或 nc -zv host port → 端口与 TLS 是否正常。

6. tcpdump → 抓包看报文到底发出去没有、有没有回。

九、注意事项与常见坑

坑一:把 ping 不通当成服务挂了

云安全组默认可能不放行 ICMP,而 80/443 是通的。判断服务可用性必须测业务端口:curl -I 或 nc -zv host 443。

坑二:子网划分漏掉网络地址与广播地址

192.168.1.0/24 只有 254 个可用地址。把 .0 或 .255 配给主机、或把网关配成广播地址,都是低级但高发的错误。用 ipcalc 或自写脚本复核:

```bash

ipcalc 192.168.10.100/26 # 输出 Network/Broadcast/HostMin/HostMax

```

坑三:TIME_WAIT 被误认为「连接泄漏」

TIME_WAIT 是主动关闭方的正常状态,说明本端在正确工作。大量 TIME_WAIT 若不是端口耗尽,不需要处理。真正要警惕的是 CLOSE_WAIT 堆积——那说明应用层忘了调用 close(),是代码 bug。

坑四:长连接下客户端不设超时

服务端 keepalive 到期会主动关连接,客户端若在旧连接上发请求会偶发失败(经典 "connection reset by peer")。客户端必须配置连接池的 maxIdleTime 小于服务端 keepalive 超时。

坑五:HTTP 缓存首部配错导致「改了代码不生效」

Cache-Control: max-age=31536000 用在 HTML 上会导致用户长期看到旧页面。正确策略是:HTML 用 no-cache(协商缓存),静态资源用带 hash 的文件名 + 长期强缓存。

坑六:DNS 改了不生效

受 TTL 影响,旧记录会缓存到过期。切换前应提前把 TTL 调小(如 300 秒),切换并稳定后再调回。另外本地还有 hosts 与浏览器缓存,排查时用 dig @8.8.8.8 绕过本地递归。

十、练习题

练习 1:子网划分

公司拿到 10.20.0.0/16,需要给 4 个部门划分:研发 1000 台、测试 500 台、运维 200 台、行政 50 台。请给出各子网的网络地址与前缀,并说明剩余多少地址可分配。

参考思路:从大到小取 满足需求的最小 :研发 (/22)、测试 (/23)、运维 (/24)、行政 (/26)。依次分配 10.20.0.0/22、10.20.4.0/23、10.20.6.0/24、10.20.7.0/26,剩余约 个地址。

练习 2:握手分析

用 tcpdump 抓一次 curl http://example.com 的流量,指出三次握手的三个报文、HTTP 请求报文和四次挥手的四个报文。若只看到 [S] 没有 [S.],可能是什么原因?

参考思路:[S] 无应答说明 SYN 到达不了对端或被丢弃——防火墙 DROP、目标端口未监听、路由不可达、SYN Flood 防护误伤。

练习 3:拥塞控制计算

某连接 ssthresh 初始为 16 MSS,cwnd 从 1 MSS 开始。请问:慢启动持续几个 RTT?第 5 个 RTT 结束时 cwnd 是多少?若此时收到 3 个重复 ACK,快恢复后的 cwnd 与 ssthresh 各是多少?

参考思路:,共 4 个 RTT 后达到 ssthresh;第 5 个 RTT 进入拥塞避免加 1,cwnd=17;快恢复令 ssthresh = cwnd/2 ≈ 8,cwnd = ssthresh(部分实现取 ssthresh+3)。

练习 4:DNS 排查

用户反馈「访问 www.example.com 超时,但访问 IP 正常」。请列出至少 3 个可能原因与对应验证命令。

参考思路:① DNS 服务器不可达 → dig @8.8.8.8;② 本地 hosts 或缓存污染 → 检查 /etc/hosts、ipconfig /flushdns;③ 权威服务器 NS 记录配错 → dig +trace;④ 域名被劫持/污染 → 对比多地解析结果。

练习 5:HTTP 版本与性能

一个页面有 100 个小资源。分别说明在 HTTP/1.1、HTTP/2、HTTP/3 下浏览器会如何加载,以及域名分片(Domain Sharding)在哪个版本下反而有害。

参考思路:HTTP/1.1 靠 6 连接并行 + 域名分片;HTTP/2 单连接多路复用,域名分片会破坏单连接复用、增加握手开销,因此在 HTTP/2 下应停止域名分片;HTTP/3 进一步消除 TCP 层 HOL。

十一、常见问题 FAQ

Q1:为什么我本地 curl localhost 正常,用局域网 IP 就不行?

常见原因是服务只监听了 127.0.0.1。检查 ss -tlnp | grep <端口>,若显示 127.0.0.1:8080 则改成 0.0.0.0:8080(如 uvicorn --host 0.0.0.0、nginx listen 0.0.0.0:80)。其次检查防火墙与云安全组。

Q2:TCP 一定比 UDP 慢吗?

不一定。首次建连 TCP 多 1 个 RTT,但建立后两者发送速度差异很小;UDP 的「快」主要来自无重传与无拥塞控制,代价是丢包时业务自己扛。对丢包敏感的场景(如 HTTP/3 的 QUIC)反而在 UDP 上重建了可靠机制来获得更低的有效时延。

Q3:HTTPS 握手要几个 RTT,能优化吗?

TLS 1.2 完整握手 2 RTT,TLS 1.3 降到 1 RTT,会话恢复可 0-RTT。优化手段:启用 TLS 1.3、开启 OCSP Stapling 与 Session Ticket、就近部署 CDN、用 ECDSA 证书减小证书体积。

Q4:为什么服务器上有大量 TIME_WAIT 却看不到 ESTABLISHED 增长?

说明是短连接模式:每次请求都新建连接,用完立刻关闭,主动关闭方进入 TIME_WAIT。长久方案是启用 HTTP Keep-Alive 与连接池,而不是去调内核参数硬压 TIME_WAIT。

相关笔记

  • 00-索引:全库导航,从「计算机基础」一节可以找到组网、系统与算法的前置知识。
  • 操作系统:TCP/IP 协议栈运行在内核中,理解 socket、中断、零拷贝需要操作系统基础。
  • 计算机组成原理:网络 I/O 与 DMA、内存带宽的关系,需要组成原理的存储层次知识。
  • 前端-04-浏览器与HTTP:从浏览器视角看渲染流程、缓存与跨域,与本文应用层内容互补。
  • 后端-01-HTTP与RESTfulAPI设计:把 HTTP 语义落到 API 设计规范上。
  • 后端-09-后端安全与性能:TLS、限流、DDoS 防护等网络安全的工程实践。
  • 工具-02-命令行与Shell:本文所有排查命令都依赖命令行基本功。
  • 学习路线图:不确定下一步学什么时看这里。

参考来源

  • RFC 791 — Internet Protocol(IPv4):https://www.rfc-editor.org/rfc/rfc791
  • RFC 792 — Internet Control Message Protocol(ICMP):https://www.rfc-editor.org/rfc/rfc792
  • RFC 826 — An Ethernet Address Resolution Protocol(ARP):https://www.rfc-editor.org/rfc/rfc826
  • RFC 1918 — Address Allocation for Private Internets:https://www.rfc-editor.org/rfc/rfc1918
  • RFC 9293 — Transmission Control Protocol(TCP,取代 RFC 793):https://www.rfc-editor.org/rfc/rfc9293
  • RFC 5681 — TCP Congestion Control:https://www.rfc-editor.org/rfc/rfc5681
  • RFC 6928 — Increasing TCP's Initial Window:https://www.rfc-editor.org/rfc/rfc6928
  • RFC 7323 — TCP Extensions for High Performance(窗口缩放):https://www.rfc-editor.org/rfc/rfc7323
  • RFC 8200 — Internet Protocol, Version 6 (IPv6) Specification:https://www.rfc-editor.org/rfc/rfc8200
  • RFC 8446 — The Transport Layer Security (TLS) Protocol Version 1.3:https://www.rfc-editor.org/rfc/rfc8446
  • RFC 9110 — HTTP Semantics:https://www.rfc-editor.org/rfc/rfc9110
  • RFC 9112 — HTTP/1.1:https://www.rfc-editor.org/rfc/rfc9112
  • RFC 9113 — HTTP/2:https://www.rfc-editor.org/rfc/rfc9113
  • RFC 9114 — HTTP/3:https://www.rfc-editor.org/rfc/rfc9114
  • MDN Web Docs — HTTP:https://developer.mozilla.org/zh-CN/docs/Web/HTTP
  • MDN Web Docs — TCP 三次握手与四次挥手(连接管理):https://developer.mozilla.org/zh-CN/docs/Web/HTTP/Connection_management_in_HTTP_1.x
  • nginx 官方文档:https://nginx.org/en/docs/
  • nginx HTTP/2 模块(ngx_http_v2_module):https://nginx.org/en/docs/http/ngx_http_v2_module.html

版本敏感提示

内核参数(如 tcp_congestion_control 的默认值)、nginx 指令语法、curl 的 HTTP/3 支持情况随版本变化较快,本文示例以写作时的常见版本为准,具体以官方最新文档为准。