鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

分布式

1357内容

关注

涵盖分布式相关研究热点、技术难点与应用场景。

文章博文课程

共 1357 条

分布式系统咋做同步？虐死人！

分布式系统，通过数据冗余，来保证数据的安全。要写一个分布式系统，一道绕不过去的坎，那就是数据同步。

2021-08-04 20:37:29

分布式系统同步

七种分布式全局 ID 生成策略，你更爱哪种？

当数据库分库分表之后，原本的主键自增就不方便继续使用了，需要找到一个新的合适的方案，松哥的需求就是在这样的情况下提出的。

2021-08-04 10:38:51

分布式 ID 策略

分布式存储系统可靠性：系统量化估算

们常常听到衡量分布式存储系统好坏的两个指标：可用性和可靠性指标。本文就重点来分析一下分布式系统的数据可靠性的量化模型。

2021-07-30 09:49:17

分布式架构系统

数据库为何又如何走向分布式？

数据库领域图灵奖获得者 Jim Gray 说过：“所有的存储系统最终都会演变成数据库系统。(All storage systems will eventually evolve to be database systems.)”

2021-07-30 06:58:28

数据库分布式映射

基于Redis的分布式锁和Redlock算法

在单进程的系统中，当存在多个线程可以同时改变某个变量(可变共享变量)时，就需要对变量或代码块做同步，使其在修改这种变量时能够线性执行消除并发修改变量。

2021-07-30 00:09:21

Redlock 算法 Redis

分布式协调框架Zookeeper核心设计理解与实战

想起很久以前在某个客户现场，微服务 B 突然无法调用到微服务 A，为了使服务尽快正常恢复，重启了微服务 B 。虽然故障原因找到了，但对于 Zookeeper 的理解还是不够深刻，于是重新学习了 Zookeeper 的核心设计，并记录于此文共勉。

2021-07-29 07:48:36

Zookeeper 核心设计

分布式系统的“脑裂”到底是个什么玩意？

目前大多数项目都在往分布式上发展，一旦系统采用分布式系统，便会引入更多复杂场景和解决方案。比如，当你在系统中使用了Elasticsearch、ZooKeeper集群时，你是否了解过集群的“脑裂”现象?又是否知道它们是如何解决脑裂问题的?

2021-07-29 06:56:36

分布式系统脑裂

分布式系统中的一致性模型

最近看到的一篇超棒的关于分布式系统中强一致性模型的blog，实在没有不分享的道理。最近比较闲，所以干脆把它翻译了，一是为了精读，二是为了更友好地分享。

2021-07-28 08:39:25

分布式架构系统

深度剖析：Redis分布式锁安全吗？

这篇文章，我们主要探讨了基于 Redis 实现的分布式锁，究竟是否安全这个问题。

2021-07-26 11:09:46

Redis 分布式技术

HarmonyOS 分布式新闻分享

本篇Codelab中我们介绍了应用的主页面和详情页，在主页面可以通过顶部的新闻类型切换不同类别的新闻，同时下面整个新闻列表项也会跟随切换。

2021-07-23 08:57:32

鸿蒙 HarmonyOS 应用

HarmonyOS 分布式亲子教育

本篇Codelab通过一个亲子早教系统，完整的为您介绍了早教算数题和益智拼图游戏两个综合案例，旨在帮助您快速了解HarmonyOS应用开发、多屏互动、分布式跨设备协同的功能了解。

2021-07-22 10:20:21

鸿蒙 HarmonyOS 应用

八卦一下快手Bagua：突破TensorFlow、PyTorch并行瓶颈的分布式训练框架

近日，快手和苏黎世理工宣布开源分布式训练框架 Bagua（八卦），相比于 PyTorch、TensorFlow 等现有深度学习开源框架仅针对系统层面进行优化，Bagua 突破了这一点，专门针对分布式场景设计了特定的优化算法，实现了算法和系统层面的联合优化，性能较同类提升 60%。

2021-07-19 11:56:56

分布式训练框架

RocketMQ千锤百炼哈啰在分布式消息治理和微服务治理中的实践

哈啰已进化为包括两轮出行(哈啰单车、哈啰助力车、哈啰电动车、小哈换电)、四轮出行(哈啰顺风车、全网叫车、哈啰打车)等的综合化移动出行平台，并向酒店、到店团购等众多本地生活化生态探索。

2021-07-16 13:11:10

分布式消息微服务

ZooKeeper 分布式锁 Curator 源码 05：分布式读写锁和联锁

Curator 同样支持分布式读写锁[1] 和联锁[2]，只需要使用 InterProcessReadWriteLock 即可，来一起看看它的源码以及实现方式。

2021-07-16 07:57:34

ZooKeeper Curator 源码

西部数据着力构建创新存储架构，赋能分布式存储，加速Web 3.0落地原创

西部数据不断为分布式存储领域提供先进的数据存储架构和解决方案。在未来，我们将持续助力客户降低部署和运维成本，并满足高效率、大容量及节能减排等多样化需求，加速Web 3.0落地，助力‘东数西算’算力网络建设。

2021-07-15 18:33:33

Springboot整合百度开源分布式ID生成器UIDGenerator

UidGenerator是Java实现的, 基于Snowflake算法的唯一ID生成器。UidGenerator以组件形式工作在应用项目中, 支持自定义workerId位数和初始化策略, 从而适用于docker等虚拟化环境下实例自动重启、漂移等场景。

2021-07-14 07:17:37

Springboot 分布式 UIDGenerato

Springboot2.x AOP 实现缓存锁，分布式锁

本人深根后台系统多年的经验;用户在网络不好情况下; 在做表单提交时;会出现重复提交的情况;故而我们需要：做到防止表单重提。

2021-07-13 06:57:12

Springboot AOP 缓存

ZooKeeper 分布式锁 Curator 源码之三：可重入锁并发加锁

在了解了加锁和锁重入之后，最需要了解的还是在分布式场景下或者多线程并发加锁是如何处理的?

2021-07-10 10:02:30

ZooKeeper Curator 并发

2021上半年：关于分布式云的那些事儿

随着数字化转型进入深水区，企业需求变得更加多样化，应用场景也随之变得愈发复杂，传统公有云的中心化架构已经难以满足用户需求，在这样背景下，业界提出了分布式云的概念。

2021-07-10 07:45:35

分布式云云计算数字化转型

ZooKeeper 分布式锁 Curator 源码之二：可重入锁重复加锁和锁释放

当锁需要释放的时候，只需要调用 lock.release() 进行释放即可，具体是如何释放的呢？

2021-07-09 06:48:31

ZooKeeper Curator 源码

分布式部署那些事

提到分布式，一定就会涉及到集中式，相比于集中式，分布式说明存在很多个节点，各个节点彼此协同工作。

2021-07-09 05:49:53

分布式代码算法

ZooKeeper 分布式锁 Curator 源码之一：可重入锁

一般工作中常用的分布式锁，就是基于 Redis 和 ZooKeeper，前面已经介绍完了 Redisson 锁相关的源码，下面一起看看基于 ZooKeeper 的锁。也就是 Curator 这个框架。

2021-07-08 09:21:17

ZooKeeper 分布式锁 Curator

分布式事务如何解决？一次讲清楚！

事务指的就是一个操作单元，在这个操作单元中的所有操作最终要保持一致的行为，要么所有操作都成功，要么所有的操作都被撤销。简单地说，事务提供一种“要么什么都不做，要么做全套”机制。

2021-07-07 10:28:09

分布式架构系统

一篇带你了解什么是分布式ID

在分布式系统中，经常需要一些全局唯一的ID对数据、消息、http请求等进行唯一标识。那么这个全局唯一ID就叫分布式ID。

2021-07-07 07:14:48

分布式 ID 分布式系统

Redisson 分布式锁源码 11：Semaphore 和 CountDownLatch

Redisson 除了提供了分布式锁之外，还额外提供了同步组件，Semaphore 和 CountDownLatch。

2021-07-07 07:09:49

Redisson 分布式锁源码

一文带你了解分布式系统中的真真假假

本文详细介绍了分布式系统中对真实的判断和处理，希望大家能有一个大概的了解。

2021-07-06 15:01:07

分布式架构系统

5 分钟搞懂高性能分布式消息系统 Kafka

kafka 由 LinkedIn 公司推出的一个高吞吐的分布式消息系统，通俗的说就是一个基于发布和订阅的消息队列。

2021-07-06 10:35:46

分布式 Kafka Linux

Redisson 分布式锁源码 10：读写锁

Redisson 还支持可重入读写锁，允许在分布式场景下，同时有多个读锁和一个写锁处于加锁状态。

2021-07-06 08:37:29

Redisson 分布式锁

Flink分布式程序的异常处理

Job与Flow之间的关系可以利用自定义的@JobFlow注解进行配置，如此就可以在执行抽象的AbstractJob的run()方法时，利用反射获得该Job下的所有Flow，遍历执行每个Flow的run()方法。

2021-07-05 09:28:11

Flink 分布式程序

优化 Golang 分布式行情推送的性能瓶颈

最近一直在优化行情推送系统，有不少优化心得跟大家分享下。性能方面提升最明显的是时延，在单节点8万客户端时，时延从1500ms优化到40ms，这里是内网mock客户端的得到的压测数据。

2021-07-05 08:58:17

Golang 分布式性能

Ceph分布式存储系统优化分析

本文介绍了Ceph分布式存储系统的发展历史和特点，并从内部优化机制、面向硬件设备和应用场景这3个方面梳理了现有的性能优化方法。

2021-07-04 07:07:06

Ceph 分布式存储架构

分布式系统架构之一Master-Workers 架构

分布式系统有很多经典的套路，也即设计模式。每个设计模式可以解决经典的一类问题，积累的多了，便可以稍加变化，进行取舍，设计出贴合需求的架构组织。

2021-07-03 19:21:50

架构分布式系统

Redisson 分布式锁源码之八：MultiLock 加锁与锁释放

基于 Redis 的 Redisson 分布式联锁 RedissonMultiLock 对象可以将多个 RLock 对象关联为一个联锁，每个 RLock 对象实例可以来自于不同的 Redisson 实例。

2021-07-03 17:45:57

分布式 Redisson MultiLock

OpenHarmony分布式软总线流程分析v1.0丨2.开启软总线，建立连接

StartListener()函数的底层存在对应不同版本平台的适配函数，这印证了鸿蒙OS各部分解耦的模块化设计思想，针对不同的硬件设备，组合成最适合该设备的OS。

2021-07-02 09:16:21

鸿蒙 HarmonyOS 应用

Redisson 分布式锁源码之公平锁释放

看门狗机制是在 RedissonBaseLock#scheduleExpirationRenewal 方法中，这块公平锁和非公平锁并无区别。

2021-07-02 08:51:09

Redisson 分布式锁公平锁

分布式环境下如何保证 ID 的唯一性

首先说下我们为什么需要分布式 ID，以及分布式 ID 是用来解决什么问题的。当我们的项目还处于单体架构的时候，我们使用数据库的自增 ID 就可以解决很多数据标识问题。

2021-07-02 06:54:43

分布式环境 ID

OpenHarmony分布式软总线流程分析v1.0丨1.被发现端，发布服务

在分布式软总线子系统中，设备分为发现端和被发现端。这里我们使用手机作为发现端，Hi3861开发板发布服务，作为被发现端。

2021-07-01 14:21:58

鸿蒙 HarmonyOS 应用

Redisson 分布式锁源码之公平锁排队加锁

Redis sorted set 有序集合数据结构：存放等待线程的顺序，分数 score 用来是等待线程的超时时间戳。

2021-07-01 09:42:08

Redisson 分布式锁

Redisson 分布式锁源码之公平锁加锁

默认的加锁逻辑是非公平的。在加锁失败时，线程会进入 while 循环，一直尝试获得锁，这时候是多线程进行竞争。就是说谁抢到就是谁的。

2021-06-30 14:56:12

Redisson 分布式公平锁

分布式数据库系统的容错处理 – 100% 成功率, 超时和性能

本文分享实际经验, 介绍什么样的选择是普适的, 各位可以参考。

2021-06-30 14:55:39

数据库系统容错

框架篇：分布式全局唯一ID

每一次HTTP请求，数据库的事务的执行，我们追踪代码执行的过程中，需要一个唯一值和这些业务操作相关联，对于单机的系统，可以用数据库的自增ID或者时间戳加一个在本机递增值，即可实现唯一值。

2021-06-28 14:45:07

分布式框架操作

Redisson 分布式锁源码之二：看门狗

说起 Redisson，比较耳熟能详的就是这个看门狗(Watchdog)机制。本文就一起看看加锁成功之后的看门狗(Watchdog)是如何实现的?

2021-06-28 10:51:55

Redisson 分布式锁 Watchdog

PolarDB-X 2.0：使用一个透明的分布式数据库是一种什么体验

透明分布式，是PolarDB-X即将发布的能力，它能让应用在使用PolarDB-X的过程中，犹如使用单机数据库一般的体验。

2021-06-28 10:14:29

分布式数据库 PolarDB-X 2

一文理解分布式事务的解决方案

随着企业应用的规模越来越大，企业会进一步进行服务化改造，以满足业务增长的需求；当前微服务架构越来越流行，跨服务的事务场景也会越来越多。

2021-06-28 10:03:44

分布式数据库架构

Redisson 分布式锁源码之一：可重入锁加锁

单系统很容易想到 Java 的各种锁，像 synchronize、ReentrantLock 等等等，那分布式系统如何处理?当然是使用分布式锁。

2021-06-27 21:24:55

Redisson Java 数据

如何用 Netty 写一个高性能的分布式服务框架？

Netty 是一个致力于创建高性能网络应用程序的成熟的 IO 框架。相比较与直接使用底层的 Java IO API，你不需要先成为网络专家就可以基于 Netty 去构建复杂的网络应用。业界常见的涉及到网络通信的相关中间件大部分基于 Netty 实现网络层。

2021-06-25 10:45:43

Netty 分布式框架 IO 框架

分布式事务的六种解决方案，写得非常好！

在分布式系统、微服务架构大行其道的今天，服务间互相调用出现失败已经成为常态。如何处理异常，如何保证数据一致性，成为微服务设计过程中，绕不开的一个难题。

2021-06-25 10:35:58

分布式代码 Java

如何用Netty写一个高性能的分布式服务框架？

Netty 是一个致力于创建高性能网络应用程序的成熟的 IO 框架。

2021-06-24 10:27:48

分布式架构系统

RocketMQ 千锤百炼 - 哈啰在分布式消息治理和微服务治理中的实践

本文就哈啰在消息流量和微服务调用的治理中踩过的坑、积累的经验进行分享。

2021-06-23 09:49:12

微服务分布式 RocketMQ

Linkerd 2.10(Step by Step)之使用 Linkerd 进行分布式跟踪

在实践中使用分布式跟踪可能很复杂，为了从高层次解释您得到了什么以及它是如何完成的，我们整理了一个list of myths。

2021-06-17 14:29:39

Linkerd 分布式跟踪 Linkerd 2.1

上一页 1 ··· 3 4 5 6 7 ··· 28 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营