业务复杂度治理方法论--十年系统设计经验总结

京东云开发者
• 阅读 255

一、复杂度综述

1、什么是复杂度

软件设计的核心在于降低复杂性。

--《软件设计的哲学》

业界对于复杂度并没有统一的定义,斯坦福教授John Ousterhout从认知负担和工作量方面给出了一个复杂度量公式

业务复杂度治理方法论--十年系统设计经验总结

子模块的复杂度cp乘以该模块对应的开发时间权重值tp,累加后得到系统的整体复杂度C

这里的子模块复杂度cp是一个经验值

需要注意:如果一个子系统特别复杂,但是很少使用及修改,也不会对整体复杂度造成太大影响。例:spring框架内部代码较为复杂,但由于几乎不需要我们去变动,所以对系统的整体复杂度影响并不大

2、复杂度分类

业务复杂度治理方法论--十年系统设计经验总结 本文主要面向业务复杂度的治理

3、业务复杂度高的影响

(1)研发成本高。需要花费更多的时间去理解、维护代码;同样的需求,可能需要要修改更多的工程和类

(2)稳定性差。过高的业务复杂度,会导致系统难以理解甚至理解出现错漏,改动代码后极易出现“按下葫芦起了瓢”的问题

二、业务系统复杂度高的常见原因

1、业务系统模块多,关系复杂,互相依赖 业务复杂度治理方法论--十年系统设计经验总结 比如一个电商业务,会包含商品、订单、采购、库存、财务等多个系统,系统之间有各种各样的依赖关系关系,如订单系统依赖库存充足才可以正常下单,采购依赖商品必须创建才可以发起采购;而系统内部又可以划分为多个子系统,如订单系统可以包含接单、营销、会员等各个子系统

2、代码晦涩,从代码中很难找到关键信息

如下边的业务处理代码,不点进具体的方法,根本不知道做了什么:

    /**
     * 处理业务逻辑
     */
    public void handleBiz(){
        step1();
        step2();
        step3();
    }

再比如下边的业务处理代码,做了方法定义外的操作,开发者很容易遗漏重要信息

    /**
     * 转换对象方法
     */
    public Po convert(Dto dto){
        Po po=new Po();
        po.field=dto.filed;
        //更新操作,不应该放到转换方法里
        mapper.update(po);
        //调用rpc服务,不应该放到转换方法里
        XXGateway.update(dto);
        return po;
    }

3、业务规则、流程变化多,变化频繁

大量的变化造成花在系统上的时间增多,提升了开发时间权重;

繁杂的业务规则写在代码中,难以理解、梳理





三、降低业务复杂度的方法

1、抽象分治,分解复杂度

(1)领域拆分

将与核心概念有关的内容抽取/合并,形成独立的领域

a、实体类的系统。映射到物理实体,比如商品中心、用户中心、地址服务等

b、流程类系统。映射到多个角色的串联协调工作,比如供应链上单,审核类系统等

c、计算任务类系统。映射到虚拟计算机类及数据处理,比如搜索排序、推荐计算等

供应链领域化拆分例子:

业务复杂度治理方法论--十年系统设计经验总结



(2)领域之内拆分

01、变与不变拆分。将不易变化的系统能力拆分出来,上层适配各种业务逻辑,底层提供稳定的能力单元。如营销领域,将优惠卡券这个不易变的内容作为一个子系统来设计



02、场景隔离。如B/C隔离,B端业务复杂度较高,流量较小,更注重数据建模、可配置、可扩展;C端业务复杂度低,但是流量较大,更注重高性能、高可用





例:营销领域进行【变与不变拆分】+【场景BC隔离】例子:

背景:营销域即有面向商家的营销资质、营销活动管理,又有面向C端用户根据活动领红包、优惠券的高频业务

其中,B端业务逻辑较复杂但请求量小,C端业务逻辑较简单但请求量大

治理方案:【变与不变拆分】+【场景BC隔离】

建设营销B端服务。提供面向商家的营销活动管理,重心放在建设复杂的营销活动模型、处理复杂的业务流程;

建设C端用户系统,提供面向C端客户的领营销资产、消费影响资产服务,重心放在高并发、高可用建设;

建设底层营销资产管理服务。如卡券中心提供生成卡券、消费卡券、查询卡券等基础稳定的服务。相对不易变化,不需要经常迭代;

上层的服务根据不同的业务场景来决定把卡券发给谁、什么时候发、发多少,业务场景变化或者有新的场景时,经常需要迭代

拆分架构如下图:

业务复杂度治理方法论--十年系统设计经验总结 

例:库存中心【变与不变拆分】例子

背景:

01、业务上。库存业务面向的业务场景较多,如采购加库存、销售扣库存,退货加库存等等;库存扣减逻辑也较复杂,如一个sku下多个渠道按照优先级扣减、一个sku有多个批次按照过期时间先后扣减等等;

02、技术上。为了提升性能,高频操作场景会先操作redis缓存,再异步同步DB数据

治理方案:抽象业务+变与不变拆分

库存操作业务可以抽象为:根据用户条件、库存划分规则定位到需要操作的库存记录,按照库存记录对库存进行操作

变与不变拆分: 01、DB库存操作、Redis库存操作建设为底层支撑能力,仅提供基础的库存加减能力,尽量保障其不变性,避免大幅度的改动影响所有业务 02、根据业务逻辑去定位库存,这部分相对来说变化比较频繁,由上游业务系统进行处理

库存架构如下图:

业务复杂度治理方法论--十年系统设计经验总结

(3)子领域/系统 内部拆分

01、代码分层。确定每一层的分工;确定调用关系,不能跨层调用;如果下层能解决的复杂性问题,不要放到上层,如:外部接口调用失败重试,不能放到服务层

常用的贫血模型分层例子: 业务复杂度治理方法论--十年系统设计经验总结

核心思路:关注点分离、能力复用。各层职责:

•接入层:负责服务接入,包含日志打印、异常处理、参数检查、权限检查等接入层能力。该层不包含业务逻辑

    @Override
    public InsertDeptResponse insertDept(InsertDeptRequest request) {
        //入参记录
        log.error("insertDept request:{}",request);
        InsertDeptResponse response=null;
        String umpKey = XXX;
        Profiler.registerInfo(umpKey, true, true);
        try{

            //校验入参,如果校验不通过,checkParam方法会抛出参数校验不通过异常
            checkParam(request);
            //权限校验,如果校验不通过,checkAuth方法会抛出权限校验不通过异常
            checkAuth();
            //业务逻辑处理,内部可能会抛出影响可用性的异常和不影响可用性的异常
            response=XXFacade.insertDept(request);
        }catch(BizRuntimeException ce){
            //不影响可用性的异常
            log.error("XXX");
            //组装返回值
            response=XXX;
        }catch (Exception e) {
            //影响可用性的异常
            log.error("XXX");
            //组装返回值
            response=XXX;
            Profiler.functionError(info);
        }
        log.error("insertDept response:{}",response);
        Profiler.registerInfoEnd(info);
        return response;
    }

•业务逻辑层:整体负责接口中的业务逻辑处理。主要进行各领域间的逻辑串联、数据处理

•领域服务层:以某个核心概念为核心组件领域服务,如权限服务,将该领域相关能力进行收口,提供给上层可复用的能力

•数据层:负责与数据库或者外部服务进行数据交互

02、自上而下的结构化分解。使用金字塔原理,将复杂逻辑进行结构化自上而下分解

例:供应链业务二维码牌安装服务治理

背景:供应链业务中,二维码牌安装服务流程特别复杂,理解与修改都很困难;流程中用到很多数据,在不同方法中被重复获取

治理方案:结构化抽象、分解业务流程

 业务复杂度治理方法论--十年系统设计经验总结 

结构化分解后的流程: 业务复杂度治理方法论--十年系统设计经验总结 

拆分后主方法伪代码:

public void setUp(){
    //参数检查阶段
    paramCheck();
    //初始化阶段
    initData();
    //业务校验阶段
    businessCheck();
    //业务执行阶段
    businessExecute();
}

(4)方法逻辑拆分。职责单一、命名准确

方法随意命名,尤其是做了与命名无关的事情,会极大的增加复杂度,影响阅读者对代码逻辑的理解

(5)系统合并

如果多个系统逻辑上耦合严重,改了一个模块,另一些基本都要变动,考虑将这些系统合并

2、添加注释,使代码易懂

(1)代码思路要通过注释/自注释标识出来

例:redis模式的库存操作,在处理逻辑主方法中,较为清晰的标注了每一步核心逻辑

业务复杂度治理方法论--十年系统设计经验总结 

(2)注释应当能提供代码之外额外的信息

重视What和Why,而不只是代码是如何实现的(How)

01、一些不那么直观的代码,可以附上原因 业务复杂度治理方法论--十年系统设计经验总结



02、设计思路,特别复杂的,可以考虑贴上设计方案的地址

 业务复杂度治理方法论--十年系统设计经验总结 

3、配置化

(1)业务对象可配置

业务中用到的同类型对象特别多,使用硬编码方式维护困难时,可以考虑抽象出可配置化的对象配置中心

如:商品中心,将商品抽象为sku,并提供名称、价格、重量等可配置的属性

(2)业务规则可配置

业务中规则部分特别复杂,可以考虑抽象出可配置化的规则配置中心

如:售卖策略配置,某sku在某业务线+某业务场景中,必须搭配某种前置sku,以XX价格进行售卖

业界有多种开源规则引擎,如Aviator、Drools、QLExpress等,不同的规则引擎在功能、性能、学习维护成本上有一定差异,需要根据自己的业务场景来进行选型

业务规则配置例子:

背景:物流能力中心项目中,要计算不同的仓类型、不同的资源类型(人员、场地、物资、车辆等)、不同履约时效的履约能力,每种场景接入的参数都不一样,计算工时也不一样,算法还经常需要调整,如果使用硬编码的方式,要对几十种业务组合编写业务逻辑,工作量大,维护困难

方案:引入规则引擎,实现业务规则可配置,提升开发、维护人效



业务复杂度治理方法论--十年系统设计经验总结 



(3)业务流程可配置

如果不同的业务场景,需要不同的执行流程,可以考虑引入流程配置框架,如:一些业务场景,流程执行顺序为A-->B-->C,另外一些业务场景执行顺序为C-->B-->A,还有一些业务场景执行顺序为B-->A-->C。

注:流程配置框架相对比较复杂,更适合平台/中台建设,其他场景建议谨慎评估后再引入

流程配置框架的核心:流程编排+能力复用(插件化),前提是流程抽象➕流程标准化

业界流程编排框架:阿里TMF、美团BPF、京东物流batrix

TMF2.0 配置流程:

业务复杂度治理方法论--十年系统设计经验总结

4、使用规范降低复杂度

本质上,是做好约定,简化思考。如:一个类命名为OrderDao,不需要看代码,就可以很清晰的知道这是一个订单数据处理的类

(1)代码规范

如接口、类、方法等的命名

(2)架构层级规范

系统分层级。上层调用底层,避免底层直接调用上层,同层级尽量避免互相调用

例:物流百川三层架构,定义了系统层级,使系统交互有序

业务复杂度治理方法论--十年系统设计经验总结

四、业务复杂度优化重构原则

1、小步快跑。每个迭代要能独立交付,保障每次迭代充分验证,更快看到重构效果

2、先写后读。通过双写,验证新模型的可行性;通过数据一致性校验后,再逐步迁移读接口

3、先轻后重。先做简单逻辑再做复杂逻辑。先迁移轻业务,有了经验后,再去迁移更复杂的重业务

点赞
收藏
评论区
推荐文章
Stella981 Stella981
3年前
Python常用操作的复杂度
  我们前面讲过list、deque、堆、字典树等高性能计算的技巧,这一节我们来整理一下Python中常用操作的时间复杂度。本文中的N表示容器的元素数量,K表示参数中元素的数量或参数的值。listlst  list(range(10,20))l1  list(range(100,105))操作时间复杂度描述
Easter79 Easter79
3年前
Terraform Module 编写指南
Module是一个Terraform模板,是对多个子节点,子资源,子架构模板的组合和抽象。利用Module在降低模板编写和维护复杂度的同时,使得模板结构更加简洁清楚。为什么要使用Module,详见文章Module让Terraform使用更简单(https://www.oschina.net/action/GoToLink?urlhttp
Wesley13 Wesley13
3年前
Vtiger CRM 几处SQL注入漏洞分析,测试工程师可借鉴
本文由云社区发表0x00前言干白盒审计有小半年了,大部分是业务上的代码,逻辑的复杂度和功能模块结构都比较简单,干久了收获也就一般,有机会接触一个成熟的产品(vtigerCRM)进行白盒审计,从审计的技术难度上来说,都比公司内的那些业务复杂得多,而真正要提高自己技术水平,更应该看的也是这些代码。vtigerCRM是一个客
Stella981 Stella981
3年前
Master公式计算递归时间复杂度
我们在算递归算法的时间复杂度时,Master定理为我们提供了很强大的便利!Master公式在我们的面试编程算法中除了BFPRT算法的复杂度计算不了之外,其他都可以准确计算!这里用求数组最大值的递归函数来举例:publicstaticintgetMax(intarr,intL,intR){if
Wesley13 Wesley13
3年前
2020年写的文章整理到了这里,请查收!
写在前面2020年默默地还是写了很多东西的,微信有了标签功能之后,整理起文章来还是比较方便的。从去年到今年准备写几个专辑,围绕于自己做交易系统或是一些通用解决方案的,当然自己平时爱叨叨的毛病也整理了一个专辑,回顾起来还比较有意思。复杂度治理系统变大之后,对应的复杂度就上来了,除了需要解决各种高性能、高可用、高并发的“规模
Stella981 Stella981
3年前
Splay和LCT的复杂度分析
$Splay$的复杂度分析不论插入,删除还是访问,我们可以发现它们的复杂度都和$splay$操作的复杂度同阶,只是一点常数的区别我们不妨假设有$n$个点的$splay$,进行了$m$次$splay$操作采用势能分析我们记$w(x)\\left\\lceil\\log\_2(size(x))
菜园前端 菜园前端
1年前
什么是时间复杂度?
原文链接:什么是时间复杂度?定性描述该算法的运行时间,一个函数、用大O表示,例如O(1)、O(n)、O(logN)...常见的时间复杂度量级常数阶O(1)对数阶O(logN)线性阶O(n)线性对数阶O(nlogN)平方阶O(n²)立方阶O(n)K次方阶O(
菜园前端 菜园前端
1年前
什么是空间复杂度?
原文链接:什么是空间复杂度?算法在运行过程中临时占用存储空间大小的度量,和时间复杂度表示一样,一个函数,用大O表示,例如O(1)、O(n)、O(^2)...基础案例O(1)这段代码因为只声明了单个变量,单个变量所占用的内存永远是1。javascriptle
菜园前端 菜园前端
1年前
什么是顺序搜索?
原文链接:什么是顺序搜索?顺序搜索是一种比较低效的搜索算法,但是实现起来相对简单。主要步骤如下:1.遍历数组2.找到跟目标值相等的元素,就返回它的下标3.遍历结束后,如果没有搜索到目标值,则返回1基础案例时间复杂度:O(n)空间复杂度:O(1)javasc
京东云开发者 京东云开发者
7个月前
计算机网络协议介绍
一、从一个请求来看网络分层原理1.1复杂的网络以下为一次请求过程中可能遇到的问题,预示着网络的复杂性。1.2如何简化复杂度为了简化网络的复杂度,网络通信的不同方面被分解为多层次结构,每一层只与紧挨着的上层或者下层进行交互,将网络分层,这样就可以修改,甚至替