分布式通信之远程调用

前言

分布式的本质就是多进程协作,共同完成任务。要协作,自然免不了通信。从今天开始就来介绍多个进程之间通信的相关内容,那么首先先介绍分布式通信中的远程调用

什么是远程调用?

以电商购物平台为例,每一笔交易都涉及订单系统支付系统库存系统,假设三个系统分别部署在三台机器 A、B、C 中独立运行,订单交易流程如下所示:

  1. 用户下单时,调用本地(机器 A)的订单系统进行下单;
  2. 下单完成后,会远程调用机器 B 上的支付系统进行支付,待支付完成后返回结果,之后在本地更新订单状态;
  3. 在本地远程调用机器 C 上的仓库系统出货,出货完成后返回出货结果。

在整个过程中,“下单”和“订单状态更新”两个操作属于本地调用,而“支付”和“出货”这两个操作是通过本地的订单系统调用其他两个机器上的函数(方法)实现的,属于远程调用。

整个订单交易流程如下图所示。
在这里插入图片描述

  • 本地调用通常指的是:进程内函数之间的相互调用;
  • 远程调用,是进程间函数的相互调用,是进程间通信 IPC(Inter-Process Communication)的一种方式。通过远程调用,一个进程可以看到其他进程的函数、方法等。

在分布式领域中,一个系统由很多服务组成,不同的服务由各自的进程单独负责,因此,远程调用在分布式通信中尤为重要。
根据进程是否部署在同一台机器上,远程调用可以分为如下两类:

  • 本地过程调用(Local Procedure Call,LPC),是指运行在同一台机器上的进程之间的互相通信,即在多进程操作系统中,运行的不同进程之间可以通过 LPC进行函数调用
  • 远程过程调用(Remote Procedure Call,RPC),是指不同机器中运行的进程之间的相互通信,某一机器上运行的进程在不知道底层通信细节的情况下,就像访问本地服务一样,去调用远程机器上的服务。

在这两种远程调用中,RPC 中的不同进程是跨机器的,适用于分布式场景,也是本文介绍的重点。

远程调用的原理及应用

我们熟知的 B/S ( Browser/Server,浏览器 / 服务器) 架构。在这种架构中,被调用方(服务器)有一个开放的接口,然后调用方(用户)通过 Browser 使用这个接口,来间接调用被调用方相应的服务,从而实现远程调用。

但是,B/S 架构是基于 HTTP 协议实现的,每次调用接口时,都需要先进行 HTTP 请求。既繁琐又费时,不适用于有低时延要求的大规模分布式系统,所以远程调用的实现大多采用更底层的网络通信协议。

接下来,介绍两种常用的远程调用机制:

  • 远程过程调用 RPC(Remote Procedure Call)
  • 远程方法调用 RMI(Remote Method Invocation)

RPC 的原理及应用

RPC 就是调用方采用参数传递的方式,通过调用本机器上的一个函数或方法,去执行远程机器上的函数或方法(可以统称为服务),并返回结果。在整个过程中,RPC 会隐藏具体的通信细节。

如下图所示,以电商购物平台的“支付”操作为例,来了解 RPC 调用的完整流程:
在这里插入图片描述

  1. 本地服务器也就是机器 A 中的订单系统,调用本地服务器上的支付系统中的支付操作 Pay(Order),该方法会直接调用 ClientStub(其中,Stub 是用于转换 RPC 过程中在订单系统和支付系统所在机器之间传递的参数),这是一次正常的本地调用。
  2. Client Stub 将方法 Pay、参数 Order 等打包成一个适合网络传输的消息,通过执行一次系统调用(也就是调用操作系统中的函数)来发送消息。
  3. 订单系统所在机器 A 的本地操作系统通过底层网络通信,将打包好的消息根据支付系统所在机器 B 的地址发送出去。
  4. 机器 B 上的操作系统接收到消息后,将消息传递给 Server Stub。
  5. 机器 B 上的 Server Stub 将接收到的消息进行解包,获得里面的参数,然后调用本地的支付订单的操作 Pay(Order)。
  6. 机器 B 上的支付操作 Pay(Order) 完成后,将结果发送给 Server Stub,其中结果可使用 XDR(External Data Representation,一种可以在不同计算机系统间传输的数据格式)语言表示。
  7. 机器 B 上的 Server Stub 将结果数据打包成适合网络传输的消息,然后进行一次系统调用发送消息。
  8. 机器 B 的本地操作系统通过底层网络将打包好的消息发送回机器 A。
  9. 机器 A 的操作系统接收到来自机器 B 的消息,并将消息发送给本地的 Client Stub。
    10.本地的 Client Stub 将消息解包,然后将解包得到的结果返回给本地的订单系统。

至此整个 RPC 过程结束。

从整个流程可以看出,机器 A 上的 Pay(Order)、 Client Stub 和网络调用之间的交互属于本地调用,机器 B 上的 Pay(Order)、Server Stub 和网络调用之间的交互也属于本地调用。

而机器 A 和机器 B 之间的远程调用的核心是,发生在机器 A 上的网络调用和机器 B 上的网络调用。RPC 的目的,其实就是要将第 2 到第 8 步的几个过程封装起来,让用户看不到这些细节。使得从用户的角度看,订单系统的进程只是做了一次普通的本地调用,然后就得到了结果。
订单系统进程并不需要知道底层是如何传输的,在用户眼里,远程过程调用和调用一次本地服务没什么不同。这,就是 RPC 的核心

RPC 与本地调用(进程内函数调用)的区别

在 RPC 中,由于不同进程内存空间无法共享,且涉及网络传输,所以不像本地调用那么简单。RPC 与本地调用主要有三点不同:
第一个区别是,调用 ID 和函数的映射。
在本地调用中,进程内可共享内存地址空间,因此程序可直接通过函数名来调用函数。而函数名的本质就是一个函数指针,可以看成函数在内存中的地址。比如,调用函数 f(),编译器会帮我们找到函数 f() 相应的内存地址。

但在 RPC 中,只通过函数名是不行的,因为不同进程的地址空间是不一样的

所以在 RPC 中,所有的函数必须要有一个调用 ID 来唯一标识。一个机器上运行的进程在做远程过程调用时,必须附上这个调用 ID

另外,我们还需要在通信的两台机器间,分别维护一个函数与调用 ID 的映射表。两台机器维护的表中,相同的函数对应的调用 ID 必须保持一致。

当一台机器 A 上运行的进程 P 需要远程调用时,它就先查一下机器 A 维护的映射表,找出对应的调用 ID,然后把它传到另一台机器 B 上,机器 B 通过查看它维护的映射表,从而确定进程 P 需要调用的函数,然后执行对应的代码,最后将执行结果返回到进程 P。

第二个区别是,序列化和反序列化。
我们知道了调用方调用远程服务时,需要向被调用方传输调用 ID 和对应的函数参数,那调用方究竟是怎么把这些数据传给被调用方的呢?

在本地调用中,进程之间共享内存等,因此我们只需要把参数压到栈里,然后进程自己去栈里读取就行。但是在 RPC 中,两个进程分布在不同的机器上,使用的是不同机器的内存,因此不可能通过内存来传递参数。

网络协议传输的内容是二进制流,无法直接传输参数的类型,因此这就需要调用方把参数先转成一个二进制流,传到被调用方后,被调用方再把二进制流转换成自己能读取的格式。这个过程,就叫作序列化和反序列化

同理,被调用方返回的结果也需要有序列化和反序列化的过程,不然调用方无法获取到结果。也就是说,RPC 与本地调用相比,参数的传递需要进行序列化和反序列化操作

第三个区别是,网络传输协议。
序列化和反序列化解决了调用方和被调用方之间的数据传输格式问题,但要想序列化后的数据能在网络中顺利传输,还需要有相应的网络协议,比如 TCP、UDP 等,因此就需要有一个底层通信层。

调用方通过该通信层把调用 ID 和序列化后的参数传给被调用方,被调用方同样需要该通信层将序列化后的调用结果返回到调用方。

也就是说,只要调用方和被调用方可以互传数据,就可以作为这个底层通信层。因此,它所使用的网络协议可以有很多,只要能完成网络传输即可。目前来看,大部分 RPC 框架采用的是 TCP 协议。

RPC 框架 Apache Dubbo

Dubbo 引入了服务注册中心的基础上,又加入了监控中心组件(用来监控服务的调用情况,以方便进行服务治理),从而实现了一个 RPC 框架。

如下图所示,Dubbo 的架构主要包括 4 部分:

  • 服务提供方:服务提供方会向服务注册中心注册自己提供的服务。
  • 服务注册中心:服务注册与发现中心,负责存储和管理服务提供方注册的服务信息和服务调用方订阅的服务类型等。
  • 服务调用方:根据服务注册中心返回的服务所在的地址列表,通过远程调用访问远程服务。
  • 监控中心:统计服务的调用次数和调用时间等信息的监控中心,以方便进行服务管理或服务失败分析等。

在这里插入图片描述
可以看到,Dubbo 的大致工作流程如下:

  1. 服务提供方需要向服务注册中心注册自己提供的服务;
  2. 服务调用方需要向注册中心预订调用服务的提供方地址列表;
  3. 服务注册中心将服务对应的提供方地址列表返回给调用方;
  4. 服务调用方根据服务地址信息进行远程服务调用;
  5. 服务调用方和服务提供方定时向监控中心发送服务调用次数及调用时间等信息。

RMI 的原理及应用

RMI 是一个基于 Java 环境的应用编程接口,能够让本地 Java 虚拟机上运行的对象,像调用本地对象一样调用远程 Java 虚拟机上的对象。

RMI 的具体原理如下图所示:

RMI 可以说是 RPC 的一种具体形式,其原理与 RPC 基本一致,唯一不同的是 RMI 是基于对象的,充分利用了面向对象的思想去实现整个过程,其本质就是一种基于对象的 RPC 实现。
RMI 的具体原理如下图所示:
在这里插入图片描述
RMI 的实现中,客户端的订单系统中的 Stub 是客户端的一个辅助对象,用于与服务端实现远程调用;服务端的支付系统中 Skeleton 是服务端的一个辅助对象,用于与客户端实现远程调用。

RPC 与 RMI 对比分析

在这里插入图片描述

总结

在这里插入图片描述

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章