分布式系统学习10:分布式事务
这是小卷对分布式系统架构学习的第13篇文章,今天学习面试中高频问题:分布式事务,为什么要用分布式事务,分布式事务的实现方案有哪些,方案对比优缺点; 1.知识体系 1.为什么要用分布式事务 单体架构时,以本地事务为例,业务场景是下单场景,用户下单、创建订单、扣减库存这些...
![分布式系统学习10:分布式事务](https://ucc.alicdn.com/pic/developer-ecology/ab7ghvgbj22ju_aa431ab78dda474c84c66379691ec39f.png)
分布式系统学习9:分布式锁
这是小卷对分布式系统架构学习的第12篇文章,今天学习面试中高频问题:分布式锁,为什么要做分布式锁,有哪些实现方式,各适用于什么场景等等问题 1. 为什么要用分布式锁? 分布式系统下,不同的服务/客户端通常运行在独立的 JVM 进程上。如果多个 JVM 进程共享同一份资源的话,使用本地...
![分布式系统学习9:分布式锁](https://ucc.alicdn.com/pic/developer-ecology/ab7ghvgbj22ju_531d6cfca453463286a27f3d0deef740.png)
Redis系列学习文章分享---第六篇(Redis实战篇--Redis分布式锁+实现思路+误删问题+原子性+lua脚本+Redisson功能介绍+可重入锁+WatchDog机制+multiLock)
Redis的实战篇-分布式锁 1. 分布式锁-基本原理和不同实现方式对比 1.1 基本原理 分布式锁是用于在分布式环境中控制共享资源访问的一种机制。其基本原理是利用某种方式确保在同一时刻只有一个客户端能够获得锁,从而避免多个客户端同时修改共享资源导致的数据不一致问题。 1.2 不同实现方式对比 常见的分布式锁实现方式包括基于数据库、基于ZooKeeper、...
联邦学习是保障数据隐私的分布式机器学习方法
一、引言 在数字化时代,数据已成为企业最宝贵的资产之一。然而,随着数据量的不断增长和隐私保护意识的提高,如何在保护数据隐私的同时实现高效的机器学习已成为业界关注的焦点。近年来,联邦学习作为一种新兴的机器学习技术,因其能够在保护数据隐私的前提下进行分布式训练,而受到越来越多企业和研究机构的青睐。本文将详细介绍联邦学...
LLM 大模型学习必知必会系列(七):掌握分布式训练与LoRA/LISA微调:打造高性能大模型的秘诀进阶实战指南
LLM 大模型学习必知必会系列(七):掌握分布式训练与LoRA/LISA微调:打造高性能大模型的秘诀进阶实战指南 1.微调(Supervised Finetuning) 指令微调阶段使用了已标注数据。这个阶段训练的数据集数量不会像预训练阶段那么大,最多可以达到几千万条,最少可以达到几百条到几千条。指令微调可以将预训练的知识“涌现”出来,进行其他类型的任务,如问答类型的任务。一般指令微调阶段对...
![LLM 大模型学习必知必会系列(七):掌握分布式训练与LoRA/LISA微调:打造高性能大模型的秘诀进阶实战指南](https://ucc.alicdn.com/fnj5anauszhew_20240528_62351ffa710d4a0f9f5e5573b106a612.png)
什么是联邦学习?与PyTorch的分布式训练有什么区别与联系?
什么是联邦学习?与PyTorch的分布式训练有什么区别与联系?primihub 对算力有什么要求,需要GPU之类的吗?能否帮举个实际例子,比如primihub具体解决了哪个问题?
联邦学习与分布式学习有什么区别和联系
联邦学习与分布式学习有什么区别和联系;安全多方计算、联邦学习、同态加密、可信计算等这些与隐私计算又有什么关联呢;隐私计算目前实际应用场景都有哪些?
学习分布式事务Seata看这一篇就够了,建议收藏
一、事务的特性ACID特性A(Atomic):原子性,构成事务的所有操作,要么都执行完成,要么全部不执行,不可能出现部分成功部分失败的情况。C(Consistency):一致性,在事务执行前后,数据库的一致性约束没有被破坏。例如:张三向李四转100元, 转账前和转账后的数据是正确状态这叫一致性,如果出现张三转出100元,李四账户没有增加100元这就出现了数据错误,就没有达到一致性。I(Isola....
![学习分布式事务Seata看这一篇就够了,建议收藏](https://ucc.alicdn.com/images/user-upload-01/img_convert/15d574e0d688b06c50753c511c2e4421.png)
认真学习分布式应用中的分布式锁
分布式锁是控制分布式系统之间同步访问共享资源的一种方式。如果不同的系统或是同一个系统的不同主机之间共享了一个或一组资源,那么访问这些资源的时候,往往需要通过一些互斥手段来防止彼此之间的干扰,以保证一致性,在这种情况下,就需要使用分布式锁了。简而言之,分布式锁就是指在分布式的部署环境下,通过锁机制来让多客户端互斥的对共享资源进行访问。分布式锁要满足哪些要求呢?互斥性–在分布式系统环境下,一个方法在....
![认真学习分布式应用中的分布式锁](https://ucc.alicdn.com/pic/developer-ecology/uyswrvle4fwks_0aa8a8dc52524bec9a8e2b643aaaff4b.png)
小白带你学习ceph分布式存储
一、概述1、分布式存储系统是一个统一的分布式存储系统,设计初衷是提供较好的性能、可靠性和可扩展性。Ceph项目最早起源于Sage就读博士期间的工作(最早的成果于2004年发表),并随后贡献给开源社区。在经过了数年的发展之后,目前已得到众多云计算厂商的支持并被广泛应用。RedHat及OpenStack都可与Ceph整合以支持虚拟机镜像的后端存储2、特点2、1 统一存储虽然 ceph 底层是一个分布....
![小白带你学习ceph分布式存储](https://ucc.alicdn.com/pic/developer-ecology/eingitbla53mo_3759ff69a8e0472da6040324b36a1fcc.png)
本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。
产品推荐
阿里云分布式应用服务
企业级分布式应用服务 EDAS(Enterprise Distributed Application Service)是应用全生命周期管理和监控的一站式PaaS平台,支持部署于 Kubernetes/ECS,无侵入支持Java/Go/Python/PHP/.NetCore 等多语言应用的发布运行和服务治理 ,Java支持Spring Cloud、Apache Dubbo近五年所有版本,多语言应用一键开启Service Mesh。
+关注