网络架构的演变 The Evolution of Web Service Architecture
凤凰架构
A server should be like a phoenix, regularly rising from the ashes.[1]
Martin Fowler https://martinfowler.com/bliki/PhoenixServer.html
架构的演进
原始分布式时代
目标:构建 “符合 UNIX 的设计哲学的” “如同本地调用一般简单透明的” 分布式系统
结果:迫于现实,这个目标在一定时期内被妥协、被舍弃。但是,到了三十多年以后的将来(即 2016 年服务网格重新提出透明通信的时候),随着分布式架构的逐渐成熟完善,取代单体成为大型软件的主流架构风格以后,这个美好的愿景终将还是会重新被开发者拾起。
UIUD
UUID 是 通用唯一识别码(Universally Unique Identifier)的缩写。其目的,是让分布式系统中的所有元素,都能有唯一的辨识信息,而不需要通过中央控制端来做辨识信息的指定。
远程方法调用和本地方法调用是不一样的
且不说远程方法不能再依靠本地方法那些以内联为代表的传统编译优化来提升速度,光是“远程”二字带来的网络环境下的新问题,譬如,远程的服务在哪里(服务发现),有多少个(负载均衡),网络出现分区、超时或者服务出错了怎么办(熔断、隔离、降级),方法的参数与返回结果如何表示(序列化协议),信息如何传输(传输协议),服务权限如何管理(认证、授权),如何保证通信安全(网络安全层),如何令调用不同机器的服务返回相同的结果(分布式数据一致性)等一系列问题,全部都需要设计者耗费大量心思。
AFS 分布式文件系统
源自 AFS 的分布式文件系统(Distributed File System,DFS)规范,当时被称为DCE/DFS
原始分布式时代的教训
Just because something can be distributed doesn’t mean it should be distributed. Trying to make a distributed call act like a local call always ends in tears
一个东西可以分布式不代笔它必须要分布式,可能还不如本地调用
UNIX 的分布式设计哲学
Simplicity of both the interface and the implementation are more important than any other attributes of the system — including correctness, consistency, and completeness
保持接口与实现的简单性,比系统的任何其他属性,包括准确性、一致性和完整性,都来得更加重要。
单体架构(Monolithic)
两个披萨原则
单体架构的问题:
在“拆分”这方面,单体系统的真正缺陷不在如何拆分,而在拆分之后的隔离与自治能力上的欠缺。
难以阻断错误传播:由于所有代码都运行在同一个进程空间之内,所有模块、方法的调用都无须考虑网络分区、对象复制这些麻烦的事和性能损失
不便于动态更新程序:同样,由于所有代码都共享着同一个进程空间,不能隔离(1)也就无法(其实还是有办法的,譬如使用 OSGi 这种运行时模块化框架,但是很别扭、很复杂)做到单独停止、更新、升级某一部分代码。(2) 面临难以技术异构的困难,每个模块的代码都通常需要使用一样的程序语言,乃至一样的编程框架去开发。
作者认为最重要的原因:随着软件架构演进,构筑可靠系统从 “追求尽量不出错”,到正视 “出错是必然” 的观念转变,才是微服务架构得以挑战并逐步开始取代运作了数十年的单体架构的底气所在。
比较微服务、单体架构哪种更好用、更优秀?
- 微服务:沃尔玛将超市分为仓储部、采购部、安保部、库存管理部、巡检部、质量管理部、市场营销部等,可以划清职责,明确边界,让管理能力能支 持企业的成长规模;
- 单体架构:但如果你家楼下开的小卖部,爸、妈加儿子,再算上看家的中华田园犬小黄一共也就只有四名员工,再去追求“先进管理”,划分仓储部、采购部、库存管理部……那纯粹是给自己找麻烦。
SOA 时代(Service-Oriented Architecture)
烟囱式架构(Information Silo Architecture)
信息烟囱又名信息孤岛(Information Island),指的是一种完全不与其他相关信息系统进行互操作或者协调工作的设计模式。这样的系统其实并没有什么“架构设计”可言。
微内核架构(Microkernel Architecture)
微内核架构也被称为插件式架构(Plug-in Architecture)
将这些主数据,连同其他可能被各子系统使用到的公共服务、数据、资源集中到一块,成为一个被所有业务系统共同依赖的核心(Kernel,也称为 Core System)
事件驱动架构(Event-Driven Architecture)
为了能让子系统互相通信,一种可行的方案是在子系统之间建立一 套事件队列管道(Event Queues),来自系统外部的消息将以事件的形式发送至管道中,各个子系统从管道里获取、处理和发送事件消息
2006 年情况才有所变化,由 IBM、Oracle、SAP 等公司共同成立了 OSOA 联盟(Open Service Oriented Architecture),2007 年,在结构化资讯标准促进组织(Organization for the Advancement of Structured Information Standards,OASIS)的倡议与支持下,OSOA 由一个软件厂商组成的松散联盟,转变为一个制定行业标准的国际组织,联合 OASIS 共同新成立了的Open CSA 组织(Open Composite Services Architecture),这便是 SOA 的官方管理机构。
很多思想开始萌生:软件架构来到 SOA 时代,许多概念、思想都已经能在今天微服务中找到对应的身影了,服务之间的松散耦合、注册、发现、治理,隔离、编排
SOA 在 21 世纪最初的十年里曾经盛行一时,有 IBM 等一众行业巨头厂商为其呐喊冲锋,吸引了不少软件开发商、尤其是企业级软件的开发商的跟随,最终却还是偃旗息鼓,沉寂了下去。
SOAP 协议被逐渐边缘化的本质原因:过于严格的规范定义带来过度的复杂性。
微服务时代 (Microservices)
“微服务”一词并不是 Peter Rodgers 直接凭空创造出来的概念,最初的微服务可以说是 SOA 发展时催生的产物,就如同 EJB 推广过程中催生了 Spring 和 Hibernate 那样
2014年,Martin Fowler 与 James Lewis 合写的文章《Microservices: A Definition of This New Architectural Term》中给出了现在微服务的定义:
“微服务是一种通过多个小型服务组合来构建单个应用的架构风格,这些服务围绕业务能力而非特定的技术标准来构建。各个服务可以采用不同的编程语言,不同的数据存储技术,运行在不同的进程之中。服务采取轻量级的通信机制和自动化的部署机制实现通信与运维。”
文中列举了微服务的九个核心的业务与技术特征:
- 围绕业务能力构建(Organized around Business Capability)。当团队、产品磨合调节稳定之后,团队与产品就会拥有一致的结构。
- 分散治理(Decentralized Governance)。服务的开发团队可以自己选择异构的技术,但其要对自己的服务质量负责。
- 通过服务来实现独立自治的组件(Componentization via Services)。
- 产品化思维(Products not Projects)。以前在单体架构下,程序的规模决定了无法让全部人员都关注完整的产品,组织中会有开发、运维、支持等细致的分工的成员,各人只关注于自己的一块工作,但在微服务下,要求开发团队中每个人都具有产品化思维,关心整个产品的全部方面是具有可行性的。
- 数据去中心化(Decentralized Data Management)。微服务明确地提倡数据应该按领域分散管理、更新、维护、存储。
- 强终端弱管道(Smart Endpoint and Dumb Pipe)。微服务提倡类似于经典 UNIX 过滤器那样简单直接的通信方式,RESTful 风格的通信在微服务中会是更加合适的选择。
- 容错性设计(Design for Failure)。接受服务总会出错的现实。要求有对依赖服务故障检测、出错时进行隔离,服务恢复时重新联通的能力。所以要有“断路器”。 可靠系统完全可能由会出错的服务组成,这是微服务最大的价值所在,也是这部开源文档标题“凤凰架构”的含义。
- 演进式设计(Evolutionary Design)。一个设计良好的服务,应该是能够报废的(演进的),而不是长存永生。
- 基础设施自动化(Infrastructure Automation)。基础设施自动化,如 CI/CD 的长足发展,显著减少了构建、发布、运维工作的复杂性。因为运维的对象相对于单体架构时期多了。
微服务追求更加自由的架构风格,提倡以“实践标准”代替“规范标准”。
正因没有了统一的规范和约束,对于SOA所解决的分布式服务的问题(服务的注册发现、跟踪治理、负载均衡、故障隔离、认证授权、伸缩扩展、传输通信、事务处理,等等,这些问题),在微服务中不再会有统一的解决方案。
比如 Java 中为服务的远程调用问题。解决方案的候选清单就有:RMI(Sun/Oracle)、Thrift(Facebook)、Dubbo(阿里巴巴)、gRPC(Google)、Motan2(新浪)、Finagle(Twitter)、brpc(百度)、Arvo(Hadoop)、JSON-RPC、REST,等等;
光一个服务发现问题,可以选择的就有:Eureka(Netflix)、Consul(HashiCorp)、Nacos(阿里巴巴)、ZooKeeper(Apache)、Etcd(CoreOS)、CoreDNS(CNCF),等等。
其他领域的情况也是与此类似,总之,完全是八仙过海,各显神通的局面。
技术中的矛盾 (也许也是生活中的矛盾):最复杂的不见得就是最好的,最好的也许就是最简单的。
微服务时代中,软件研发本身的复杂度应该说是有所降低。一个简单服务,并不见得就会同时面临分布式中所有的问题,也就没有必要背上 SOA 那百宝袋般沉重的技术包袱。
作为一个普通的服务开发者,作为一个“螺丝钉”式的程序员,微服务架构是友善的。
微服务对架构者是满满的恶意,对架构能力要求已提升到史无前例的程度,笔者在这部文档的多处反复强调过,技术架构者的第一职责就是做决策权衡,有利有弊才需要决策,有取有舍才需要权衡,如果架构者本身的知识面不足以覆盖所需要决策的内容,不清楚其中利弊,恐怕也就无可避免地陷入选择困难症的困境之中。
结语:软件架构不会止步于自由,微服务仍不是架构探索终点。
有微服务的自由权利,但又不必承担自行解决分布式问题的责任。
如果有下一个时代,笔者希望是信息系统能同时拥有微服务的自由权利,围绕业务能力构建自己的服务而不受技术规范管束,但同时又不必以承担自行解决分布式的问题的责任为代价。
后微服务时代 (Cloud Native) 云原生(kubernetes)
一直以来存在的问题:注册发现、跟踪治理、负载均衡、传输通信等
这些问题一定要由软件系统自己来解决吗?