分布式和集群区别与分布式的应用场景

article/2025/9/1 16:34:51

分布式是指将一个业务拆分不同的子业务,分布在不同的机器上执行,集群是指多台服务器集中在一起,实现同一业务,可以视为一台计算机,一个云计算平台,就是通过一套软件系统把分布式部署的资源集中调度使用。要应对大并发,要实现高可用,既需要分布式,也离不开集群。

分布式和集群区别?

分布式

分布式:是指将一个业务拆分不同的子业务,分布在不同的机器上执行。

常用的分布式就是在负载均衡服务器后加一堆web服务器,然后在上面搞一个缓存服务器来保存临时状态,后面共享一个数据库,

如图所示:

 

这种环境下真正进行分布式的只是web server而已,并且web server之间没有任何联系,所以结构和实现都非常简单。

集群

集群:是指多台服务器集中在一起,实现同一业务,可以视为一台计算机。

多台服务器组成的一组计算机,作为一个整体存在,向用户提供一组网络资源,这些单个的服务器就是集群的节点。

两个特点

可扩展性:集群中的服务节点,可以动态的添加机器,从而增加集群的处理能力。

高可用性:如果集群某个节点发生故障,这台节点上面运行的服务,可以被其他服务节点接管,从而增强集群的高可用性。

集群分类

常用的集群分类

1.高可用集群(High Availability Cluster)

高可用集群,普通两节点双机热备,多节点HA集群。

2.负载均衡集群(Load Balance Cluster)

常用的有 Nginx 把请求分发给后端的不同web服务器,还有就是数据库集群,负载均衡就是,为了保证服务器的高可用,高并发。

3.科学计算集群(High Performance Computing Cluster)

简称HPC集群。这类集群致力于提供单个计算机所不能提供的强大的计算能力。

两大能力

负载均衡:负载均衡能把任务比较均衡地分布到集群环境下的计算和网络资源。

集群容错:当我们的系统中用到集群环境,因为各种原因在集群调用失败时,集群容错起到关键性的作用。

例如 Dubbo 的集群容错:

Failover Cluster

失败自动切换,当出现失败,重试其它服务器,通常用于读操作,但重试会带来更长延迟。

Failfast Cluster

快速失败,只发起一次调用,失败立即报错,通常用于非幂等性的写操作,比如新增记录。

Failback Cluster

失败自动恢复,后台记录失败请求,定时重发,通常用于消息通知操作。

Forking Cluster

并行调用多个服务器,只要一个成功即返回,通常用于实时性要求较高的读操作,但需要浪费更多服务资源。

简单总结

分布式,从狭义上理解,也与集群差不多,但是它的组织比较松散,不像集群,有一定组织性,一台服务器宕了,其他的服务器可以顶上来。

分布式的每一个节点,都完成不同的业务,一个节点宕了,这个业务就不可访问了。

1. 分布式是指将一个业务拆分不同的子业务,分布在不同的机器上执行。

2. 集群是指多台服务器集中在一起,实现同一业务,可以视为一台计算机。

分布式的每一个节点,都可以用来做集群。而集群不一定就是分布式了。

什么是云计算平台?

一个云计算平台,就是通过一套软件系统把分布式部署的资源集中调度使用。要应对大并发,要实现高可用,既需要分布式,也离不开集群。

比如负载均衡,如果只是一台服务器,这台宕机了就完蛋了。

分布式的难点,就是很多机器做存在依赖关系的不同活儿,这些活儿需要的资源、时间区别可能很大,某些机器还可能罢工,要怎么样才能协调好,做到效率最高,消耗最少,不出错。

分布式的应用场景?

平时接触到的分布式系统有很多种,比如分布式文件系统,分布式数据库,分布式WebService,分布式计算等等,面向的情景不同,但分布式的思路是否是一样的呢?

1.简单的例子

假设我们有一台服务器,它可以承担1百万/秒的请求,这个请求可以的是通过http访问网页,通过tcp下载文件,jdbc执行sql,RPC调用接口…,现在我们有一条数据的请求是2百万/秒,很显然服务器hold不住了,会各种拒绝访问,甚至崩溃,宕机,怎么办呢。

一台机器解决不了的问题,那就两台。所以我们加一台机器,每台承担1百万。如果请求继续增加呢,两台解决不了的问题,那就三台呗。

这种方式我们称之为水平扩展。如何实现请求的平均分配便是负载均衡了。

另一个栗子,我们现在有两个数据请求,数据1 90万,数据2 80万,上面那台机器也hold不住,我们加一台机器来负载均衡一下,每台机器处理45万数据1和40万数据2,但是平分太麻烦,不如一台处理数据1,一台处理数据2,同样能解决问题,这种方式我们称之为垂直拆分

水平扩展和垂直拆分是分布式架构的两种思路,但并不是一个二选一的问题,更多的是兼并合用。下面介绍一个实际的场景。这也是许多互联网的公司架构思路。

2.实际的例子

我此时所在的公司的计算机系统很庞大,自然是一个整的分布式系统,为了方便组织管理,公司将整个技术部按业务和平台拆分为部门,订单的,会员的,商家的等等,每个部门有自己的web服务器集群,数据库服务器集群,通过同一个网站访问的链接可能来自于不同的服务器和数据库,对网站及底层对数据库的访问被分配到了不同的服务器集群,这个便是典型的按业务做的垂直拆分,每个部门的服务器在hold不住时,会有弹性的扩展,这便是水平扩展

在数据库层,有些表非常大,数据量在亿级,如果只是纯粹的水平的扩展并不一定最好,如果对表进行拆分,比如可以按用户id进行水平拆表,通过对id取模的方式,将用户划分到多张表中,同时这些表也可以处在不同的服务器。按业务的垂直拆库和按用户水平拆表是分布式数据库中通用的解决方案。

比如 Mycat 开源分布式数据库中间件 http://www.mycat.io/

3.分布式一致性

分布式系统中,解决了负载均衡的问题后,另外一个问题就是数据的一致性了,这个就需要通过同步来保障。根据不同的场景和需求,同步的方式也是有选择的。

在分布式文件系统中,比如商品页面的图片,如果进行了修改,同步要求并不高,就算有数秒甚至数分钟的延迟都是可以接受的,因为一般不会产生损失性的影响,因此可以简单的通过文件修改的时间戳,隔一定时间扫描同步一次,可以牺牲一致性来提高效率。

但银行中的分布式数据库就不一样了,一丁点不同步就是无法接受的,甚至可以通过加锁等牺牲性能的方式来保障完全的一致。

在一致性算法中paxos算法是公认的最好的算法,Chubby、ZooKeeper 中Paxos是它保证一致性的核心。这个算法比较难懂,我目前也没弄懂,这里就不深入了。

 

 


http://chatgpt.dhexx.cn/article/bvyAY0Cb.shtml

相关文章

java集群和分布式 区别_集群和分布式的区别?

集群和分布式有什么区别? 分布式系统: 分布式系统(distributed system)是建立在网络之上的软件系统。正是因为软件的特性,所以分布式系统具有高度的内聚性和透明性。因此,网络和分布式系统之间的区别更多的在于高层软件(特别是操作…

分布式和集群的区别

分布式和集群的区别 分布式 分布式就是将多台服务器集中在一起,每台服务器都实现总体中的不同业务。每台服务器都缺一不可,如果某台服务器发生宕机了,则网站的 部分功能缺失,将导致整体无法运行。 分布式存在的作用主要是将应用…

php常用换行代码

文章目录 一、""二、"\n" 记录一下php换行的代码书写 一、"</br>" "<br/>"浏览器显示换行&#xff0c;源代码显示<br/>例&#xff1a; <?php echo "Test"."<br/>"; echo "one…

php不换行显示,php中\n不换行

本文俺将跟大家介绍两个解决办法。 原因 PHP中默认输出的文档格式是text/html&#xff0c;在html文件中识别\n为空格。 解决办法 办法一 设置content-type 显示的将content-type设置为text/plain&#xff0c;注&#xff1a;设置后将不能使用html标签。 例&#xff1a; /** * 犀…

php 保存文件并换行,php是怎样向文件中写入换行_后端开发

php向文件中写入换行的要领是&#xff1a;1、在变量【$filename】背面加上“\r\n”&#xff1b;2、在代码中写入【file_put_contents($filelist&#xff0c;$filename“\r\n”&#xff0c;FILE_APPEND)】函数。 PHP写文件换行的体式格局 直接在字符串背面加"\r\n"不行…

php换行替换,php怎么替换回车换行

php替换回车的方法&#xff1a;1、使用语句“str_replace(array("/r", "/n", "/r/n"), "", $string);”&#xff1b;2、利用正则表达式&#xff1b;3、通过语句“$str str_replace(PHP_EOL,)”。 PHP替换回车换行的三种方法 一个小小…

关于PHP中echo换行问题

前提&#xff1a;在 PHP 中仅双引号支持字符串转义“\” 但是我发现即使是双引号&#xff0c;\n也没有正常换行 echo "hello \n world";首先&#xff0c;PHP没有任何问题&#xff0c;成功将转移换行符\n解析出来&#xff0c;最初还以为PHP不兼容\n这个语法呢。 检查…

php换行操作总结

作为php的初学者,常常遇到一个容易混淆的小问题, 那就是在php代码中写入\n换行操作符&#xff0c;以为在浏览器那里呈现的输出是换行&#xff0c;没想到却没有。但是写入 br 却顺利通过.导致很多初学者傻傻分不清! 其实<br>和\n都可以,为什么说都可以呢&#xff1f; 这…

php echo换行

<?php $root [1, 2, 2, 3, 4, 4, 3];echo count($root) . "<br>";echo $root[0]; ?>

PHP如何换行

mac下<br>和\n都可以 为什么说都可以呢&#xff1f; 这和php文件的执行方式有关 php文件有两种执行方式&#xff0c;一种是通过网页访问&#xff0c;一种是通过命令提示符 <?phpecho "this is a \n"; echo "test \n";?> ① 通过网页执行 …

php 换行替换成p,php 换行如何替换

php换行替换的方法&#xff1a;1、使用str_replace来替换换行&#xff0c;语法如“str_replace(array("\\r\\n", "\\r", "\\n"), "", $str);”&#xff1b;2、使用正则表达式替换&#xff1b;3、使用php定义好的变量替换。 推荐&#…

如何在PHP中换行

文章目录 正文解决方法方法一&#xff1a;使用 HTML 中的换行符方法二&#xff1a;查看 PHP 解析的源代码 额外说明参考资料 本文是对 PHP 换行符的使用讲解 正文 今天在学习 PHP 的过程中发现 \n 并没有像书上说的正常换行。 举个例子&#xff0c;如下 PHP 代码&#xff1a…

PHP字符串换行

目录直达 PHP字符串中换行方法一&#xff1a;&#xff08;PHP_EOL&#xff09;方法二&#xff1a;&#xff08;\n&#xff08;或 \r\n&#xff09;换行&#xff09;方法三&#xff1a;&#xff08;enter键换行&#xff09;方法四&#xff1a;&#xff08;使用HTML换行符<br …

PHP如何使用换行符?(代码示例)

在PHP脚本中有时需要进行换行输出&#xff0c;那么如何进行换行&#xff1f;下面本篇文章就来给大家介绍一下在PHP中如何使用换行符进行换行&#xff0c;希望对大家有所帮助。 方法一&#xff1a;使用PHP换行符 换行符是用于逃避继续使用相同行的分隔符。这是为了将冗长的线分…

java本地缓存简介

java中的本地缓存&#xff0c;工作后陆续用到,一直想写&#xff0c;一直无从下手&#xff0c;最近又涉及到这方面的问题了&#xff0c;梳理了一下。自己构造单例、guava、ehcache基本上涵盖了目前的大多数行为了。 为什么要有本地缓存&#xff1f; 在系统中&#xff0c;有些数…

【java缓存、redis缓存、guava缓存】java中实现缓存的几种方式

一、通过HashMap实现缓存 这种方式可以简单实现本地缓存&#xff0c;但是实际开发中不推荐使用&#xff0c;下面我们来实现一下这种方式。 首先创建一个管理缓存的类 public class LocalCache {public static HashMap<String,String> cache new HashMap<>();sta…

Java实现一个简单的缓存

cache 阅读原文请访问我的博客BrightLoongs Blog  缓存是在web开发中经常用到的&#xff0c;将程序经常使用到或调用到的对象存在内存中&#xff0c;或者是耗时较长但又不具有实时性的查询数据放入内存中&#xff0c;在一定程度上可以提高性能和效率。下面我实现了一个简单的…

java中缓存简介

外存&#xff1a; 也就是我们经常说的&#xff08;CDEF盘的大小&#xff09;外储存器是指除计算机内存及CPU缓存以外的储存器&#xff0c;此类储存器一般断电后仍然能保存数据。常见的外存储器有硬盘、软盘、光盘、U盘等&#xff0c;一般的软件都是安装在外存中 内存&#xff1…

java缓存学习

首先说一下缓存著名的开源框架&#xff1a; 最出名的当属 Redis 和 Memcached 了&#xff0c;它们因为使用简便、高性能而成为事实上的标准。还有一些是比较有名的Java开源缓存框架&#xff0c;例如Ehcache、GuavaCache 和 Caffeine 静态缓存和动态缓存&#xff1a; 所谓静态…

JAVA缓存技术

最近再ITEYE上看到关于讨论JAVA缓存技术的帖子比较多,自己不懂,所以上网大概搜了下,找到一篇,暂作保存,后面如果有用到可以参考。此为转贴,帖子来处:http://cogipard.info/articles/cache-static-files-with-jnotify-and-ehcache 介绍 JNotify:http://jnotify.sourcefor…