分布式架构网络通信

article/2025/10/11 9:05:34

        在分布式服务框架中,一个最基础的问题就是远程服务是怎么通讯的,在Java领域中有很多可实现远程通讯的技术,例如:RMI、Hessian、SOAP、ESB和JMS等,它们背后到底是基于什么原理实现的呢

1、基本原理

        要实现网络机器间的通讯,首先得来看看计算机系统网络通信的基本原理,在底层层面去看,网络通信需要做的就是将流从一台计算机传输到另外一台计算机,基于传输协议和网络IO来实现,其中传输协议比较出名的有tcp、udp等等,tcp、udp都是在基于Socket概念上为某类应用场景而扩展出的传输协议,网络IO,主要有bio、nio、aio三种方式,所有的分布式应用通讯都基于这个原理而实现

2、什么是RPC

        RPC全称为remote procedure call,即远程过程调用。借助RPC可以做到像本地调用一样调用远程服务,是一种进程间的通信方式

        比如两台服务器A和B,A服务器上部署一个应用,B服务器上部署一个应用,A服务器上的应用想调用B服务器上的应用提供的方法,由于两个应用不在一个内存空间,不能直接调用,所以需要通过网络来表达调用的语义和传达调用的数据。需要注意的是RPC并不是一个具体的技术,而是指整个网络远程调用过程。

RPC架构 

        一个完整的RPC架构里面包含了四个核心的组件,分别是Client,Client Stub,Server以及Server Stub,这个Stub可以理解为存根

  • 客户端(Client),服务的调用方。
  • 客户端存根(Client Stub),存放服务端的地址消息,再将客户端的请求参数打包成网络消息,然后通过网络远程发送给服务方。
  • 服务端(Server),真正的服务提供者。
  • 服务端存根(Server Stub),接收客户端发送过来的消息,将消息解包,并调用本地的方法。

  1. 客户端(client)以本地调用方式(即以接口的方式)调用服务;
  2. 客户端存根(client stub)接收到调用后,负责将方法、参数等组装成能够进行网络传输的消息体(将消息体对象序列化为二进制);
  3. 客户端通过socket将消息发送到服务端;
  4. 服务端存根( server stub)收到消息后进行解码(将消息对象反序列化);
  5. 服务端存根( server stub)根据解码结果调用本地的服务;
  6. 服务处理
  7. 本地服务执行并将结果返回给服务端存根( server stub);
  8. 服务端存根( server stub)将返回结果打包成消息(将结果消息对象序列化);
  9. 服务端(server)通过socket将消息发送到客户端;
  10. 客户端存根(client stub)接收到结果消息,并进行解码(将结果消息发序列化);
  11. 客户端(client)得到最终结果。 

RPC的目标是要把2、3、4、5、7、8、9、10这些步骤都封装起来。只剩下1、6、11

注意:无论是何种类型的数据,最终都需要转换成二进制流在网络上进行传输,数据的发送方需要将对象转换为二进制流,而数据的接收方则需要把二进制流再恢复为对象。

在java中RPC框架比较多,常见的有Hessian、gRPC、Dubbo 等,其实对 于RPC框架而言,核心模块就是通讯和序列化

3、RMI

        Java RMI,即远程方法调用(Remote Method Invocation),一种用于实现远程过程调用RPC-Remoteprocedure call)的Java API, 能直接传输序列化后的Java对象。它的实现依赖于Java虚拟机,因此它仅支持从一个JVM到另一个JVM的调用。

1.客户端从远程服务器的注册表中查询并获取远程对象引用。


2.桩对象与远程对象具有相同的接口和方法列表,当客户端调用远程对象时,实际上是由相应的桩对象代理完成的。


3.远程引用层在将桩的本地引用转换为服务器上对象的远程引用后,再将调用传递给传输层
(Transport),由传输层通过TCP协议发送调用;


4.在服务器端,传输层监听入站连接,它一旦接收到客户端远程调用后,就将这个引用转发给其上层的远程引用层; 5)服务器端的远程引用层将客户端发送的远程应用转换为本地虚拟机的引用后,再将请求传递给骨架(Skeleton); 6)骨架读取参数,又将请求传递给服务器,最后由服务器进行实际的方法调用。


5.如果远程方法调用后有返回值,则服务器将这些结果又沿着“骨架->远程引用层->传输层”向下传递;


6.客户端的传输层接收到返回值后,又沿着“传输层->远程引用层->桩”向上传递,然后由桩来反序列化这些返回值,并将最终的结果传递给客户端程序。 

代码示例

需求分析:

  1. 服务端提供根据ID查询用户的方法
  2. 客户端调用服务端方法, 并返回用户对象
  3. 要求使用RMI进行远程通信

代码实现:

服务端

package com.lagou.rmi.server;import com.lagou.rmi.service.IUserService;
import com.lagou.rmi.service.UserServiceImpl;
import com.sun.source.tree.NewClassTree;import java.rmi.RemoteException;
import java.rmi.registry.LocateRegistry;
import java.rmi.registry.Registry;/*** 服务端*/
public class RMIServer {public static void main(String[] args) {// 注册Registry实例,绑定端口try {Registry registry = LocateRegistry.createRegistry(9998);// 创建远程对象IUserService userService = new UserServiceImpl();// 将远程对象注册到RMI服务器上,即服务端注册表上registry.rebind("userService", userService);System.out.println("----RMI服务端启动成功----");} catch (RemoteException e) {throw new RuntimeException(e);}}
}

客户端

package com.lagou.rmi.client;import com.lagou.rmi.pojo.User;
import com.lagou.rmi.service.IUserService;import java.rmi.NotBoundException;
import java.rmi.Remote;
import java.rmi.RemoteException;
import java.rmi.registry.LocateRegistry;
import java.rmi.registry.Registry;/*** 客户端*/
public class RMIClient {public static void main(String[] args) throws RemoteException, NotBoundException {// 获取Registry实例Registry registry = LocateRegistry.getRegistry("127.0.0.1", 9998);// 通过Registry实例查找远程对象IUserService userService = (IUserService) registry.lookup("userService");User user = userService.getByUserId(1);System.out.println(user.getId() + "------" + user.getName());}
}

接口与实现类

package com.lagou.rmi.service;import com.lagou.rmi.pojo.User;import java.rmi.Remote;
import java.rmi.RemoteException;public interface IUserService extends Remote {// 接口必须继承Remote这个类User getByUserId(int id) throws RemoteException;;
}package com.lagou.rmi.service;import com.lagou.rmi.pojo.User;import java.rmi.RemoteException;
import java.rmi.server.UnicastRemoteObject;
import java.util.HashMap;
import java.util.Map;public class UserServiceImpl extends UnicastRemoteObject implements IUserService {// 必须要继承UnicastRemoteObject 这个类,才能进行远程调用Map<Object, User> UserMap = new HashMap<Object, User>();public UserServiceImpl() throws RemoteException {super();User user1 = new User();user1.setId(1);user1.setName("张三");User user2 = new User();user2.setId(2);user2.setName("李四");UserMap.put(user1.getId(), user1);UserMap.put(user2.getId(), user2);}@Overridepublic User getByUserId(int id) throws RemoteException {return UserMap.get(id);}
}

实体类

import java.io.Serializable;
public class User implements Serializable { // 必须要实现Serializable 序列化接口private int id;private String name;
// 省略get与set方法
}

启动server与client,远程调用方法成功。


http://chatgpt.dhexx.cn/article/ogW7dBcS.shtml

相关文章

企业分布式网络监控

IT 基础架构已成为提供基本业务服务的基石&#xff0c;无论是内部管理操作还是为客户托管的应用程序服务。监控IT基础设施至关重要&#xff0c;并且已经建立。SMB IT 基础架构需要简单的网络监控工具来监控性能和报告问题。通常&#xff0c;几个 IT 管理员配置网络设备、防火墙…

分布式网络通信框架(一)——集群和分布式

单机聊天服务器 缺点&#xff1a; 受限于硬件资源&#xff0c;服务器所能承受的用户并发量不够大&#xff1b; 任意模块修改&#xff0c;都会导致整个项目代码重新编译、部署&#xff1b; 系统中&#xff0c;有些模块是CPU密集型&#xff0c;有些是IO密集型&#xff0c;造成…

传统分布式网络架构

在同一个自治系统内&#xff0c;当主机A要和A主机B通讯时&#xff0c;需要把发给主机B的数据包先发给网关路由器A&#xff0c;路由器A根据路由表决定数据包下一跳发给路由器B或C&#xff0c;根据IP报文内携带的目的地址11.8.9.12&#xff0c;在路由表中查找最长匹配路由表项&am…

分布式网络基础

在分布式服务化架构设计中,服务与服务之间通信均是基于网络底层协议来实现的,于是我们需要对网络相关基础知识有一个基本的认知,这样在我们服务与服务之间进行通信(跨进程通信)过程能够在我们的脑图形成一个基本的数据传输流程以及其中的细节问题,这样对于我们在进行网络问题的…

服务计算 -- 搭建私有云

服务计算 – 搭建私有云 文章目录 服务计算 -- 搭建私有云下载VirtualBox及所需镜像安装虚拟机配置虚拟机存储位置创建虚拟机内部虚拟网络创建Base虚拟机&#xff08;Centos为例&#xff09;链接复制第二台虚拟机 远程桌面访问虚拟机安装图形化界面 下载VirtualBox及所需镜像 …

搭建自己的私有云盘

一、准备工作 centos8&#xff0c;nextcloud&#xff0c;mysql 二、安装docker&#xff08;官方文档&#xff09; $ yum install -y yum-utils $ yum-config-manager \ --add-repo \ https://download.docker.com/linux/centos/docker-ce.repo $ yum install -y https://dow…

OwnCloud私有云服务搭建教程

OwnCloud是一款开源的存储云&#xff0c;其作用可以像百度网盘那样存放文件到这个云当中&#xff0c;只要能连上网&#xff0c;手机&#xff0c;平板&#xff0c;电脑都可以从中下载或者上传文件&#xff0c;用起来非常不错&#xff0c;部署的过程也很简单&#xff0c;废话不多…

如何搭建个人私有云盘

前言 文章首发于Noah Sun’s Home 如何搭建个人私有云盘 市场上有很多云盘的产品&#xff0c;比如百度云盘&#xff0c;不过本教程主要目的是要搭建个人私有云盘。查了网上很多资料&#xff0c;个人云盘也有很多&#xff0c;比如nextcloud&#xff0c;owncloud&#xff0c;sea…

服务器上搭建私有云--owncloud

国内云盘太垃圾&#xff0c;各种box又要翻墙&#xff0c;有自己的服务器的朋友不如搭建一个自己的私有云&#xff0c;再也不会有任何限制。私有云的平台有seafile、owncloud等&#xff0c;这里我选择了owncloud。 owncloud的搭建极其简单&#xff0c;官方有提供一键搭建包 ht…

阿里云服务器搭建私人云盘

1、配置安全组端口 新建安全组并开放以下端口 2、利用 Git 来搭建私人云盘 1、利用 Workbench 点击立即登录 进行远程连接 2、安装 docker 容器 docker 是一款开源的容器运行工具&#xff0c;提供了一套便捷的服务打包、分发、部署方式。我们将要部署的服务就是通过 docker …

搭建 ownCloud 私有云教程

Nginx ownCloud PHP MySQL搭建私有云 OwnCloud概述&#xff1a; OwnCloud是一个开源免费专业的私有云存储项目&#xff0c;它可以帮你快速的在个人电脑或者服务器上假设一套专属的私有云文件同步网盘&#xff0c;也可以像百度网盘一样实现文件跨平台同步&#xff0c;共享等…

手把手教你搭建owncloud私有云平台

本来想把标题定为“基于LAMP的owncloud服务器搭建教程”&#xff0c;想了想&#xff0c;如果这么定的话&#xff0c;怕是都没人来看&#xff0c;岂不是自己砸了自己的“招牌”&#xff0c;废话不多说下面开始进入正文。 引言 搭建私有云的初衷不需要再花过重的篇幅去强调&#…

教你如何一招打通「公有云、私有云」,快学起来

数据灾难年年有 一不小心 下一个受害者就是你 当灾难来临时 才会发现备份的重要性 借助群晖NAS 使用 Cloud Sync 就可以将公有云上的数据 自动同步到本地 NAS 上 当然也可以将本地的文件 进行自动上传 使你的数据双倍安全 我们所支持的网盘类型如下&#xff1a; 本次…

私有云服务器搭建教程(保姆级)——台式电脑+ubuntu+docker+nextcloud+mysql+花生壳内网穿透

前言 随着移动互联网的发展&#xff0c;越来越多的人使用云网盘存储他们的文档、照片、视频等文件。不知从什么时候起&#xff0c;我们不知不觉开始为享受云存储的服务付费买单。一次上传&#xff0c;随处访问&#xff0c;越来越成为人们的日常需求。随之而来的是各云网盘每月…

搭建私有云的4大主流方案

随着云计算和移动办公大潮的到来&#xff0c;iPad、智能手机等家庭联网设备不断增多&#xff0c;以及搭载小容量SSD笔记本电脑的流行&#xff0c;能够跨平台分享的个人云服务需求不断增长;而今天的个人云服务也已经极大丰富&#xff0c;从2TB的百度网盘到商务人士中流行的Dropb…

阿里云虚拟私有网络的搭建及MySQL安装方式

一、阿里云虚拟私有网络的搭建 由于安全机制&#xff0c;无法上传&#xff0c;功能服务均已实现 二、通过编译、二进制安装MySQL5.7 2.1 编译安装 yum install cmake gcc gcc-c ncurses-devel bison zlib libxml openssl automake autoconf make libtool bison-devel liba…

本地搭建mysql

首先&#xff0c;本地搭建一个mysql本身没什么实际意思&#xff0c;因为一般项目不会在window上进行开发&#xff0c;但是可以给你提供一个练习mysql的地方&#xff0c;也是很不错的&#xff0c;希望可以帮助到大家&#xff0c;话不多说&#xff0c;开始&#xff01;&#xff0…

阿里云服务器搭建MySQL环境

目录&#xff1a; 1. 检查是否安装过 2. 下载官方安装包 3. 安装MSQL安装包 4. 启动MySQL服务 5. 检查运行状态 6. 查看初始密码 7. 进入数据库 8. 修改数据库密码 9. 授权远程访问权限 10.设置白名单 1.检查是否安装过 rpm -qa|grep -i mysql 如果安装过&#xff0c;可通过r…

快点搜quickso.cn

【QuickSo】快点搜&#xff0c;搜快点&#xff01; 助你快速找到资源https://quickso.cn/

.Bank文件音效提取

前言 发现打包的音频文件在.bank后缀的文件中&#xff0c;想从中提取出来&#xff0c;写文章记录一下 一、需要的工具 工具&#xff1a;quickbms 下载地址&#xff1a; 链接&#xff1a;https://pan.baidu.com/s/1cnm9acXrXgYKKcmssWxvnw 提取码&#xff1a;ils4 二、使…