6

系统设计小抄 - 如何做到高可用、高吞吐、高扩展性

 8 months ago
source link: https://www.51cto.com/article/777065.html
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
neoserver,ios ssh client

系统设计小抄 - 如何做到高可用、高吞吐、高扩展性

作者:李华 2023-12-20 09:26:20
高扩展性意味着系统可以快速、轻松地扩展,以容纳更多的容量(横向可扩展性)或更多的功能(纵向可扩展性)。通常,我们通过观察响应时间来决定是否需要扩展系统。

我们经常需要设计具有高可用性、高可扩展性和高吞吐量的系统。它们的确切含义是什么?

下图是一份系统设计小抄,包含“三高”常见的解决方案。

图片
图片

01 高可用性

高可用意味着我们需要达到一个高水平的正常运行时间。我们通常将设计目标描述为 "3 个 9 " 或 "4 个 9"。"4 个九",即 99.99% 的正常运行时间,意味着服务每天只能中断 8.64 秒。

要实现高可用性,我们需要在系统中设计冗余。有几种方法可以做到这一点:

  • Hot-Hot

两个实例接收相同的输入,并将输出发送到下游服务。如果其中一方宕机,另一方可以立即接替。由于两边都向下游发送输出,下游系统需要能够处理重复数据。

  • Hot-Warm

两个实例接收相同的输入,只有 Hot 端向下游服务发送输出。如果 Hot 端宕机, Warm 端将接替并开始向下游服务发送输出。

  • 单领导集群 (Single Leader)

一个领导实例从上游系统接收数据并复制到其他副本。

  • 无领导集群 (Leaderless)

这种集群中没有领导者。任何写入都会复制到其他实例。只要写入实例数加上读取实例数大于实例总数,我们就能获得有效数据。这被称为 quorum。

02 高吞吐量

这意味着服务需要在一段时间内处理大量请求。常用的指标是 QPS(每秒查询次数)或 TPS(每秒事务次数)。

为了实现高吞吐量,我们通常会在架构中添加缓存,以避免经过数据库或磁盘等较慢的 I/O 设备。我们还可以为计算密集型任务增加线程数量。但是,增加过多的线程会降低性能。因此,我们需要找出系统的瓶颈,提高系统的吞吐量。

我们还可以在系统中使用异步处理,以有效地单独隔离耗时耗资源的组件。

03 高扩展性

高扩展性意味着系统可以快速、轻松地扩展,以容纳更多的容量(横向可扩展性)或更多的功能(纵向可扩展性)。通常,我们通过观察响应时间来决定是否需要扩展系统。

要实现高度可扩展性,需要隔离每个服务的职责。为此,微服务被广泛采用。我们还利用服务注册和负载平衡器将请求路由到适当的实例。

责任编辑:武晓燕 来源: ByteByteGo

About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK