分布式亿级流量整体架构设计原则

这篇具有很好参考价值的文章主要介绍了分布式亿级流量整体架构设计原则。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

分布式亿级流量整体架构设计原则

架构目标

  1. 高可用性

整体系统可用性最低99.9%,目标99.99%。全年故障时间整个系统不超过500分钟,单个系统故障不超过50分钟。

  1. 高可扩展性 系统架构简单清晰,应用系统间耦合低,容易水平扩展,业务功能增改方便快捷。

  2. 低成本 增加服务的重用性,提高开发效率,降低人力成本;

  3. 最终一致性

服务设计能满足数据最终一致性,能方便、快捷的满足三方、或者对方对账需求。

  1. 质量要求

我们要求在系统设计时候要兼顾下面的各个质量要求

分布式亿级流量整体架构设计原则

架构总体原则

分布式亿级流量整体架构设计原则

DID原则解释

Design(D)设计20倍的容量;Implement(I)实施3倍的容量;Deploy(D)部署1.5倍的容量

原因:DID为产品扩展提供了经济,有效,及时的方法

要点:在早期考虑可扩展性可以帮助团队节省时间和金钱。在需求发生大约一个月前实施(写代码),在客户蜂拥而至的几天前部署。

例子:“什么时候该在可扩展性上投入”有些轻率的回答是,最好在需要的前一天投入和部署。如果你能够多做到达需要改善可扩展性方案的前一天部署,那么 这笔投资的时机最佳,而且有助于实现公司财务和股东利益的最大化。 让我们面对现实,及时投入和部署根本就不可能,即使可能,也无法确定具体的时间,而且会带来很多风险。

DID(设计-实施-部署):思考问题和设计方案,为方案构建系统和编写代码;实际安装或者部署方案。

设计(Design):DID方法的设计(D)阶段聚集在扩展到20倍和无限大之间,通过如今可扩展性大会,把领导者和工程师团队聚集在一起,共同讨论产品的扩展瓶颈,这是在DID设计阶段发现和确定需要扩展部分的一个好办法。

实施(I,Implement):我们把规模需求的范围缩小到更接近现实,例如当前规模的3~20倍。

部署(D,Deploy):在部署阶段资产的成本较高,如果是一家适度高增长的公司,也许我们可以把最大产能提高到1.5倍;如果是一家超高增长的公司,也许我们可以把最大产能提高到5倍。扩展具有弹性,它既可以扩张也可以收缩,因此灵活性是关键,因为你需要响应客户的请求,随着规模的收缩和扩张,在系统之间调整容量

架构设计原则

  1. 业务平台化
  • 业务平台化,相互独立。 如交易平台、仓储平台、物流平台、支付平台、广告平台等
  • 基础业务下沉,可复用。如用户、商品、类目、促销、订单等 (参考目前核心系统)。
  1. 核心业务、非核心业务分离

核心业务与非核心业务分离,核心业务精简(利于稳定),非核心业务多样化。

  1. 隔离不同类型的业务
  • 交易业务是签订买家和卖家之间的交易合同,需要优先保证高可用性,让用户能快速下单
  • 对高并发要求很高的业务,应该跟普通业务隔离
  1. 区分主流程、辅流程

分清哪些是主流程。运行时,优先保证主流程的顺利完成,辅流程可以采用后台异步的方式。避免辅流程的失败导致主流程的回滚。

应用架构设计要点

  1. 稳定性原则
  • 一切以稳定为中心
  • 架构尽可能简单、清晰
  • 不过度设计
  1. 解耦、拆分
  • 稳定部分与易变部分分离
  • 核心业务与非核心业务分离
  • 主业务与辅业务分离
  • 应用与数据分离
  • 服务与实现细节分离
  1. 抽象化
  • 应用抽象化:应用只依赖服务抽象,不依赖服务实现细节、位置
  • 数据库抽象化:应用只依赖逻辑数据库,不需要关心物理库的位置和分片
  • 服务器抽象化:应用虚拟化部署,不需要关心实体机配置,动态调配资源
  1. 松耦合
  • 同步调用时,需要设置超时时间、对调用异常时候的failover处理。
  • 非核心业务尽量异步化:核心、非核心业务之间,尽量异步解耦。
  • 跨业务线(比如分期乐、桔子、鼎盛间)调用需要采用HTTP接口方式,避免底层业务逻辑耦合和依赖。
  1. 容错设计
  • 服务自治:服务能彼此独立修改、部署、发布和管理,避免一个服务发生灾害引发连锁反应(一定要对mq、rpc、db、redis的异常容错处理、异常包括超时、业务异常、系统异常等)。
  • 集群容错:应用系统集群,避免单点。
  • 多机房容灾:多机房部署,多活。

6 数据的一致性原则

  • 小规模分布或不分布的业务确保可用、数据可靠、一致,即A & C兼顾;
  • 中型分布系统需要考虑【BASE-最终一致性】,如果涉及到订单、交易、清结算等数据敏感场景,保持数据最终一致性是最基本原则;
  • 大规模分布式系统在不涉及订单、交易、清结算等数据敏感场景上可以考虑【有损服务】;。

架构分解原则

分布式亿级流量整体架构设计原则

架构依赖原则

  1. 依赖稳定部分
  • 稳定部分不依赖易变部分
  • 易变部分可以依赖稳定部分
  • 要求:避免循环依赖
  1. 跨域弱依赖

跨业务域调用时,尽可能异步弱依赖

  1. 基本服务依赖
  • 基本服务不能向上依赖流程服务
  • 组合服务、流程服务可以向下依赖基本服务
  • 条件:基本服务稳定
  1. 平台服务依赖
  • 平台服务不依赖上层应用
  • 上层应用可依赖平台服务
  • 条件:平台服务稳定
  1. 核心服务依赖
  • 核心服务不依赖非核心服务
  • 非核心服务可依赖核心服务
  • 条件:核心服务稳定

 文章来源地址https://www.toymoban.com/news/detail-746095.html

到了这里,关于分布式亿级流量整体架构设计原则的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 分布式系统架构设计之分布式缓存技术选型

    随着互联网业务的快速发展,分布式系统已经成为了解决大规模并发请求、高可用性、可扩展性等问题的重要手段。在分布式系统中,缓存作为提高系统性能的关键技术,能够显著降低数据库负载、减少网络延迟、提高数据访问速度。当面对大量并发请求时,如果每次都直接

    2024年02月03日
    浏览(117)
  • 【系统架构】分布式系统架构设计

    分布式系统是指由多个计算机节点组成的一个系统,这些节点通过网络互相连接,并协同工作完成某个任务。 与单个计算机相比,分布式系统具有更高的可扩展性、可靠性和性能等优势,因此广泛应用于大规模数据处理、高并发访问、分布式存储等领域。 分布式系统的设计

    2024年02月15日
    浏览(55)
  • 精确掌控并发:滑动时间窗口算法在分布式环境下并发流量控制的设计与实现

    这是《百图解码支付系统设计与实现》专栏系列文章中的第(15)篇,也是流量控制系列的第(2)篇。点击上方关注,深入了解支付系统的方方面面。 上一篇介绍了固定时间窗口算法在支付渠道限流的应用以及使用redis实现的核心代码。 本篇重点讲清楚滑动时间窗口算法原理

    2024年01月22日
    浏览(60)
  • 精确掌控并发:固定时间窗口算法在分布式环境下并发流量控制的设计与实现

    这是《百图解码支付系统设计与实现》专栏系列文章中的第(14)篇。点击上方关注,深入了解支付系统的方方面面。 本篇主要介绍分布式场景下常用的并发流量控制方案,包括固定时间窗口、滑动时间窗口、漏桶、令牌桶、分布式消息中间件等,并重点讲清楚固定时间窗口

    2024年01月19日
    浏览(57)
  • 架构设计-分布式ID

    1.不要用主键ID作为业务单号的唯一标识,因为一是数据同步麻烦,第二一旦业务数据扩张涉及到分库分表则数据维护麻烦,因为此时主键ID容易造成重复 。 2.对于有相似属性的业务ID如直播或者录播ID存储在业务表中的一个字段,一旦程序员哪天状态不好忘记区分类型,就很

    2024年02月03日
    浏览(87)
  • 分布式系统架构设计之分布式数据存储的扩展方式、主从复制以及分布式一致性

    在分布式系统中,数据存储的扩展是为了适应业务的增长和提高系统的性能。分为水平扩展和垂直扩展两种方式,这两种方式在架构设计和应用场景上有着不同的优势和局限性。 水平扩展是通过增加节点或服务器的数量来扩大整个系统的容量和性能。在数据存储领域,水平扩

    2024年02月03日
    浏览(75)
  • 分布式系统架构设计之分布式数据存储的安全隐私和性能优化

    在前面分布式系统部分,有对安全性做过介绍,如前面所述,在分布式系统中,确保系统的安全性和隐私是至关重要的。安全性关注系统的防护措施,而隐私是关注用户的个人信息保护。 身份认证:确保用户和系统组件的身份是合法的,通过通过密码、令牌或证书实现 授权

    2024年02月02日
    浏览(61)
  • 【架构设计】单体软件分布式化思考

    单体软件是历史悠久的软件架构形态,以下是一个简单的前后端分离的单体架构的 web 软件。 单体软件采用分布式方案部署,是根据需求而定的。 为了满足不同场景下的需求,单体软件中的客户端、代理层、服务、数据库,都可以以多个副本联合起来,提供服务的方式部署,

    2024年01月18日
    浏览(58)
  • 云原生系列之分布式架构设计要点

    到目前来看整个架构的演变过程是从单体到水平垂直扩展,再到 SOA 设计,领域驱动设计,事件驱动设计,后到云原生的架构和优势,如果在技术网站甚至微信公众号就可以搜到一堆关于这些的架构设计说明,现在我想换一种方式,从某个点出发,某个概念出发,某个模式出

    2024年04月16日
    浏览(49)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包