Skip to content

Commit 6854de6

Browse files
author
wangyazhou
committed
添加负载均衡相关
1 parent 8727fcf commit 6854de6

10 files changed

+186
-1
lines changed

network/attachments/balancer-BXimvOkh 1.svg

Lines changed: 1 addition & 0 deletions
Loading

network/attachments/balancer-edge-proxy-WA9hsFL-.svg

Lines changed: 1 addition & 0 deletions
Loading

network/attachments/balancer-ha-2-Dadwkfrs.svg

Lines changed: 1 addition & 0 deletions
Loading

network/attachments/balancer-sdk-CVcDh2WI.svg

Lines changed: 1 addition & 0 deletions
Loading

network/attachments/balancer-sidecar-D5vBnZQF.svg

Lines changed: 1 addition & 0 deletions
Loading

network/attachments/balancer4-NAT-KLm9ODdw.svg

Lines changed: 1 addition & 0 deletions
Loading

network/attachments/balancer4-dsr-ZMeH2uRR.svg

Lines changed: 1 addition & 0 deletions
Loading

network/attachments/balancer4-tunnel-DGY5TldN.svg

Lines changed: 1 addition & 0 deletions
Loading

network/attachments/lvs-ha-DO2CUxU4.svg

Lines changed: 1 addition & 0 deletions
Loading

network/负载均衡与代理技术.md

Lines changed: 177 additions & 1 deletion
Original file line numberDiff line numberDiff line change
@@ -139,5 +139,181 @@ TLS 卸载(TLS Termination)是指将 TLS 加密/解密、证书管理等操
139139

140140
考虑各个服务器的处理能力存在差异,负载均衡算法又有了对服务器“**加权**”的补充。
141141

142-
加权负载均衡算法通过按权值高低分配请求,使权重较高的服务器处理更多连接,从而保证集群内后端服务器的负荷整体均衡。常用的加权负载均衡算法有加权轮询(Weighted Round Robin)、加权最小连接(Weighted Least-Connection)和加权随机(Weighted Random)等等,笔者就不再逐一介绍了。
142+
加权负载均衡算法通过按权值高低分配请求,使权重较高的服务器处理更多连接,从而保证集群内后端服务器的负荷整体均衡。常用的加权负载均衡算法有加权轮询(Weighted Round Robin)、加权最小连接(Weighted Least-Connection)和加权随机(Weighted Random)等等
143+
144+
## 负载均衡部署拓扑
145+
146+
本节将介绍四种负载均衡部署拓扑,不同的部署拓扑决定了流量如何被分配、如何实现冗余和高可用性,进而影响系统的性能、可扩展性和容错能力。
147+
148+
### 1 中间代理型
149+
第一种是中间代理型部署拓扑,如图所示。这是最常见的负载均衡部署方式,负载均衡器位于客户端与后端服务器之间,负责将请求转发至多个后端服务器。
150+
151+
在这种拓扑中,负载均衡器可以分为以下三类:
152+
153+
- 硬件设备:由 Cisco、Juniper、F5 Networks 等公司提供的硬件负载均衡设备;
154+
- 纯软件:如 Nginx、HAProxy、Envoy 和 Traefik 等开源软件负载均衡器;
155+
- 云服务:包括阿里云的 SLB(Server Load Balancer)、AWS 的 ELB(Elastic Load Balancer)、Azure 的 Load Balancer 和 Google Cloud 的 Cloud Load Balancing 等云平台提供的负载均衡服务。
156+
157+
总结中间代理型优缺点:
158+
159+
- 优点:配置简便,用户只需通过 DNS 连接到负载均衡器,无需关心后端细节,使用体验简单直观;
160+
- 缺点:存在单点故障的风险,负载均衡器一旦出现故障,会导致整个系统无法访问。
161+
![[balancer-BXimvOkh 1.svg]]
162+
### 2 边缘代理型
163+
边缘代理型实际上是中间代理型拓扑的一个变种。
164+
165+
一个典型的边缘代理示例是动态请求‘加速’技术。Akamai 在全球多个数据中心部署边缘节点,这些节点具备代理功能,用户请求会被路由至最近的节点。收到请求后,边缘节点会执行安全检查(如 DDoS 防护),根据缓存策略决定是返回缓存内容(CDN 技术),或者将请求转发至源服务器(请求加速技术)。
166+
167+
总结边缘代理型优缺点:
168+
169+
- 优点:通过将负载均衡、缓存和安全策略集中在网络边缘,边缘代理显著降低延迟、提高响应速度,并增强安全性(如 DDoS 防护);
170+
- 缺点:虽然边缘代理减少了单点故障的风险,但若某个边缘节点发生故障,仍会影响到该节点服务的用户。
171+
![[balancer-edge-proxy-WA9hsFL-.svg]]
172+
### 3 客户端内嵌
173+
为解决中间代理型拓扑的单点故障问题,出现了更复杂的解决方案,其中之一是将负载均衡器以 SDK 库形式嵌入客户端)。这些 SDK 库如 Finagle、Eureka、Ribbon 和 Hystrix 等,它们优缺点是:
174+
175+
- 优点:将负载均衡器功能“转移”至客户端,避免了单点故障问题;
176+
- 缺点:需要为每种编程语言实现相应的 SDK,且在项目复杂时,处理版本依赖和兼容性问题变得棘手。
177+
![[balancer-sdk-CVcDh2WI.svg]]
178+
### 4 边车代理型
179+
180+
边车代理型拓扑近年来在微服务架构中得到广泛应用,并发展成为一种被称为“服务网格”(Service Mesh)的架构模式。
181+
182+
边车代理的基本原理是在应用容器或服务旁边部署一个独立的代理容器,用于实现请求的负载均衡和流量管理。目前,像 Envoy 和 Linkerd 等网络型边车代理已被广泛应用。
183+
![[balancer-sidecar-D5vBnZQF.svg]]
184+
总体而言,中间代理型负载均衡器正逐步演变为功能更强大的“网关”,所有请求通过单一入口(即网关)进入集群。在这种架构下,负载均衡器作为网关,不仅负责基本的请求转发,还承担更高级的请求管理与安全控制,包括 TLS 卸载、请求限制、身份验证和复杂内容路由等。同时,针对东西向流量(即服务间通信),边车代理模式“透明”地接管了服务间的通信治理,正逐渐成为主流选择。
185+
186+
## 四层负载均衡技术
187+
四层负载均衡器的典型代表是 LVS(Linux Virtual Server,Linux 虚拟服务器),由中国程序员章文嵩于 1998 年开发。
188+
189+
当时,章文嵩正在读博士,正是能熬通宵的年纪,他发现硬件负载均衡器价格昂贵,用了几周时间开发了 LVS(最初称为 IPVS)。2004 年,LVS(IPVS)被纳入 Linux 内核 2.4。从此之后,所有 Linux 系统都具备了变身为负载均衡器的能力。
190+
191+
LVS 的基本原理可以用一句话概述,通过修改 MAC 层、IP 层、TCP 层的数据包,实现一部分交换机和网关的功能,将流量转发至真正的服务器上。这三种数据包修改方式分别对应 LVS 提供的三种工作模式,接下来将详细介绍它们的工作原理。
192+
193+
## [#](https://www.thebyte.com.cn/balance/balance4.html#_4-4-1-%E7%9B%B4%E6%8E%A5%E8%B7%AF%E7%94%B1%E6%A8%A1%E5%BC%8F)4.4.1 直接路由模式
194+
LVS 的直接路由模式实际是一种链路层转发技术。
195+
196+
链路层负转发的原理是,负载均衡器(LVS)收到请求后,修改数据帧的目标 MAC 地址,再由交换机转发至某个“后端服务器”。
197+
198+
需要注意的是,后端服务器接收到的数据包中,IP 层的目标地址(即 VIP)并不属于后端服务器的物理网络接口,这些数据包会被丢弃。因此,必须将 VIP 地址绑定到本地回环接口(lo 接口)。
199+
200+
例如,若某个 VIP 地址为 1.1.1.1,可以通过以下命令将该 IP 绑定到后端服务器的 lo 接口:
201+
202+
```
203+
$ ip addr add 1.1.1.1/32 dev lo
204+
```
205+
206+
在直接路由模式中,请求通过负载均衡器转发至后端服务器,而后端服务器的响应无需再经过负载均衡器,请求、转发和响应之间形成“三角关系”,因此该模式也被称为“三角传输模式”,如图 4-9 所示。
207+
208+
![[balancer4-dsr-ZMeH2uRR.svg]]
209+
直接路由模式优点在于,它特别适合响应流量远大于请求流量的场景。例如,在典型的 HTTP 请求/响应模式中,请求流量可能仅占总流量的 10%,而响应流量占 90%。通过三角传输模式,负载均衡器只需处理 1/10 的总流量。这种设计不仅显著降低了带宽成本,还提升了负载均衡器的可靠性(流量越少、负载越轻、越不容易出现问题)。
210+
211+
当然,直接路由模式也存在明显的缺点:
212+
213+
- **监控功能受限**:由于响应流量直接返回客户端,负载均衡器无法监控完整的 TCP 连接状态,这可能影响防火墙策略的实施。例如,负载均衡器只能捕获 TCP 连接的 SYN 包,而无法跟踪后续的 ACK 包。
214+
- **网络架构要求高**:负载均衡器与后端服务器之间通过链路层通信,因此要求两者位于同一子网内,这对网络拓扑设计提出了较高的要求。
215+
216+
## [#](https://www.thebyte.com.cn/balance/balance4.html#_4-4-2-%E9%9A%A7%E9%81%93%E6%A8%A1%E5%BC%8F)4.4.2 隧道模式
217+
218+
在直接路由模式中,请求通过修改链路层的 MAC 地址转发;而在网络层,当然也可以通过修改 IP 数据包实现请求转发。LVS 的隧道模式和 NAT 模式都属于网络层负载均衡,两者的区别是修改 IP 数据包的方式不同。
219+
220+
隧道模式的基本原理是,LVS 创建一个新的 IP 数据包,将原始 IP 数据包作为“负载”(payload)嵌入其中。新数据包随后被三层交换机路由到后端服务器,后者通过拆包机制移除额外的头部,恢复原始 IP 数据包并进行处理。
221+
222+
举一个具体例子,假设客户端(IP 203.0.113.5)向 VIP (1.1.1.1) 发送的数据包如下:
223+
224+
```
225+
{
226+
Source IP: 203.0.113.5,
227+
Destination IP: 1.1.1.1,
228+
Payload: "Request data"
229+
}
230+
```
231+
232+
负载均衡器收到数据包后,根据调度算法选择一台后端服务器(172.12.1.3),并对数据包进行封装处理。
233+
234+
```
235+
{
236+
Source IP: 172.12.1.2,
237+
Destination IP: 172.12.1.3,
238+
Payload: {
239+
Original Source IP: 203.0.113.5,
240+
Original Destination IP: 1.1.1.1,
241+
Original Data: "Request data"
242+
}
243+
}
244+
```
245+
246+
将一个 IP 数据包封装在另一个 IP 数据包内,并配合相应的解包机制,这是典型的 IP 隧道技术。在 Linux 中,IPIP 隧道实现了字面意义上的“IP in IP”。由于隧道模式工作在网络层,绕过了直接路由模式的限制,因此 LVS 隧道模式可以跨越子网进行通信。
247+
248+
如图 4-10 所示,由于源数据包信息完全保留,隧道模式因此也继承了三角传输的特性。
249+
![[balancer4-tunnel-DGY5TldN.svg]]
250+
隧道模式可以视为直接路由模式的升级版,支持跨网通信。不过,由于涉及数据包的封装与解封,后端服务器必须支持相应的隧道技术(如 IPIP 或 GRE)。其次,隧道模式继承了三角传输的特性,因此后端服务器也需要处理虚拟 IP(VIP)与 lo 接口的关系。
251+
252+
## [#](https://www.thebyte.com.cn/balance/balance4.html#_4-4-3-%E7%BD%91%E7%BB%9C%E5%9C%B0%E5%9D%80%E8%BD%AC%E6%8D%A2%E6%A8%A1%E5%BC%8F)4.4.3 网络地址转换模式
253+
254+
另一种对 IP 数据包的修改方式是**直接修改原始 IP 数据包的目标地址,将其替换为后端服务器的地址**。这种方式被称为“网络地址转换”(NAT)模式,其请求和响应的流程如图 4-11 所示。
255+
256+
![[balancer4-NAT-KLm9ODdw.svg]]
257+
举例一个具体的例子,假设客户端(203.0.113.5:37118)请求负载均衡器(1.1.1.1:80),四层负载均衡器根据调度算法挑选了某个后端服务器(10.0.0.2:8080)处理请求。
258+
259+
此时,四层负载均衡器处理请求和响应的逻辑如下:
260+
261+
- 当客户端请求到达负载均衡器时,负载均衡器执行 NAT 操作:
262+
- 首先是 DNAT(目标地址转换) 操作:将目标 IP 和端口(1.1.1.1:80)改为后端服务器的 IP 和端口(10.0.0.2:8080),这使得**请求能够被路由至指定的后端服务器处理**
263+
- 为了保持通信的完整性,负载均衡器还会执行 SNAT(源地址转换)操作。也就是原始源 IP 和端口(203.0.113.5:37118)改为四层负载均衡器的 IP 和端口(1.1.1.1:某个随机端口)。**SNAT 操作确保后端服务器认为请求是来自负载均衡器**,而不是直接来自客户端。
264+
- 当后端服务器返回响应时,负载均衡器执行相反的 NAT 操作:
265+
- 将源 IP 和端口改回 1.1.1.1:80。
266+
- 将目标 IP 和端口改回客户端的 203.0.113.5:37118。
267+
268+
最终,客户端请求/接收的都是负载均衡器的 IP 和端口,并不知道实际的后端服务器信息。
269+
270+
从上述可见,网络地址转换(NAT)模式下,负载均衡器代表整个服务集群接收和响应请求。因此,当流量压力较大时,系统的瓶颈就很容易体现在负载均衡器上。
271+
272+
## [#](https://www.thebyte.com.cn/balance/balance4.html#_4-4-4-%E4%B8%BB%E5%A4%87%E6%A8%A1%E5%BC%8F)4.4.4 主备模式
273+
274+
到目前为止,我们讨论的都是单个负载均衡器的工作模式。那么,如果负载均衡器出现故障呢?这将影响所有经过该负载均衡器的连接。为了避免因负载均衡器故障导致服务中断,负载均衡器通常以高可用模式进行部署。
275+
276+
图 4-12 展示了最常见的主备模式,其核心在于每台节点上运行 Keepalived 软件,该软件实现了 VRRP(Virtual Router Redundancy Protocol)协议,虚拟出一个对外提供服务的 IP 地址(VIP)。默认情况下,VIP 绑定在主节点(Master)上,由主节点处理所有流量请求。备用节点(Backup)则持续监控主节点的状态,当主节点发生故障时,备用节点会迅速接管 VIP,确保服务不中断。
277+
278+
![[lvs-ha-DO2CUxU4.svg]]
279+
280+
主备模式的设计在现代分布式系统中非常普遍,但这种方式存在以下缺陷:
281+
282+
- 在正常运行时,50% 的资源处于闲置状态,备用服务器始终处于空转状态,导致资源利用率低下。
283+
- 现代分布式系统更加注重高容错性。理想情况下,即使多个实例同时发生故障,服务仍应能持续运行。然而,在主备模式下,一旦主节点和备用节点同时发生故障,服务将完全中断。
284+
285+
## [#](https://www.thebyte.com.cn/balance/balance4.html#_4-4-5-%E5%9F%BA%E4%BA%8E%E9%9B%86%E7%BE%A4%E5%92%8C%E4%B8%80%E8%87%B4%E6%80%A7%E5%93%88%E5%B8%8C%E7%9A%84%E5%AE%B9%E9%94%99%E5%92%8C%E5%8F%AF%E6%89%A9%E5%B1%95%E6%A8%A1%E5%BC%8F)4.4.5 基于集群和一致性哈希的容错和可扩展模式
286+
287+
近些年,业界开始设计全新四层负载均衡系统,其设计目标是:
288+
289+
- 避免传统主备模式的缺点。
290+
- 从依赖厂商的商业硬件方案,转向基于标准服务器和网卡的通用软件解决方案。
291+
292+
如图 4-13 所示,这种设计被称为“基于集群和一致性哈希的容错和可扩展性”(Fault Tolerance and Scaling via Clustering and Distributed Consistent Hashing)。其工作原理如下:
293+
294+
- N 个边缘路由器使用相同的 BGP 权重通告所有 Anycast VIP[^1],确保同一流(flow)的所有数据包都通过相同的边缘路由器。
295+
- N 个四层负载均衡器使用相同的 BGP 权重向边缘路由器通告 VIP,确保同一流的数据包始终经过相同的四层负载均衡器。
296+
- 每个四层负载均衡器实例通过一致性哈希算法,为每个流选择一个后端服务器
297+
![[balancer-ha-2-Dadwkfrs.svg]]
298+
总结该模式的优点:
299+
300+
- 边缘路由器和负载均衡器实例可以根据需求动态扩展,数据流的转发不受影响。
301+
- 通过预留足够的突发量和容错空间,系统资源的利用率可根据实际需求优化,确保最优配置。
302+
- 无论是边缘路由器还是负载均衡器,都可以基于通用硬件构建,且其成本仅为传统硬件负载均衡器的一小部分。
303+
304+
---
305+
306+
[^1]: Anycast VIP 是一种通过 Anycast 路由协议分配的虚拟 IP 地址,用于在多个位置部署相同的 IP 地址,并根据路由选择将流量引导到最靠近的或最优的服务器节点
307+
308+
309+
310+
311+
312+
313+
314+
315+
316+
317+
318+
143319

0 commit comments

Comments
 (0)