51CTO首页
AI.x社区
博客
学堂
精品班
直播训练营
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

分布式

1344内容  
涵盖分布式相关研究热点、技术难点与应用场景。
文章 博文课程
共 1344 条
EverDB之分布式执行计划
我们通过“EXPLAIN + SQL”指令可以详细地查看其执行计划，找到性能瓶颈，为我们优化SQL提供方向和依据。本文将从EverDB分布式数据库角度阐述执行计划。

2021-09-07 10:43:25

EverDB分布式执行
用 Python 轻松完成一个 Saga 分布式事务
在这篇文章里，我们介绍了 SAGA 的理论知识，也通过一个例子，完整给出了编写一个 SAGA 事务的过程，涵盖了正常成功完成，异常情况，以及成功回滚的情况。

2021-09-07 09:26:13

Python 开发编程语言
哪种分布式事务处理方案效率最高？必然是...
在微服务系统中，服务之间的互相调用，我们可以使用 HTTP 的方式，例如 OpenFeign，也可以使用 RPC 的方式，例如 Dubbo，除了这些方案之外，我们也可以使用消息驱动，这是一种典型的响应式系统设计方案。

2021-09-03 10:37:35

分布式事务处理
Longhorn 云原生容器分布式存储 - Python Client
如果您在本地机器上运行自动化/脚本(automation/scripting)工具，请使用 kubectl port-forward 将 longhorn-frontend service 转发到 localhost。

2021-09-03 05:00:28

分布式存储云原生
照抄不翻车：抗住千万流量的大型分布式系统架构设计
本文是学习大型分布式网站架构的技术总结。对架构一个高性能、高可用、可伸缩及可扩展的分布式网站进行了概要性描述，并给出一个架构参考。文中一部分为读书笔记，一部分是个人经验总结，对大型分布式网站架构有较好的参考价值。

2021-09-02 10:37:53

分布式大型网站架构
分布式云选择移动工作负载可以提供什么优势？
云用户受益于将运行硬件和软件基础设施的责任转移给提供商。他们可以利用云弹性的经济性，并从云供应商的快速创新中获益。

2021-09-01 09:19:53

分布式云云计算云存储
分布式身份服务，权威隐私保护
互联网+的时代不断发展，可以说现在全球都是互联网的覆盖范围。大到各个国家的政策，小到每个个体的身份，都从线下转移到了线上。

2021-08-31 22:52:40

区块链互联网技术
华为云拉美发布十余款新品，覆盖分布式云、云原生、大数据、AI等领域
近期，华为云举办拉美两周年庆系列活动，并携手客户及伙伴分享数字化转型及智能升级实践经验。8月30日-9月3日，华为云逐步面向拉美首次发布智能边缘云IEC、智能边缘平台IEF、企业级云网络解决方案KYON、函数计算服务FunctionGraph2.0、多云容器平台MCP、应用服务网格ASM、容器安全服务CGS、GaussDB数据库、企业级AI开发平台ModelArts Pro、云视频服务等明星服务，覆盖分布式云、云原生、大数据、人工智能、音视频等领域。

2021-08-31 11:53:00

华为云云原生分布式云
简单的方式创建分布式应用程序
Ray 是基于 Python 的分布式计算框架，采用动态图计算模型，提供简单、通用的 API 来创建分布式应用。使用起来很方便，你可以通过装饰器的方式，仅需修改极少的的代码，让原本运行在单机的 Python 代码轻松实现分布式计算，目前多用于机器学习。

2021-08-30 20:19:55

应用程序
HarmonyOSJS分布式能力—学习笔记
JS也是具有分布式能力的，本文就以两个小项目来分享JS的分布式拉起和分布式迁移♪(∇*),分布式拉起允许拉起一个本地或远程的FA，拉起时可以传递参数。

2021-08-30 18:36:33

鸿蒙HarmonyOS应用
阿里二面：Redis分布式锁过期了但业务还没有执行完，怎么办
我们使用了redis的分布式锁。具体做法是后端接收到请求后加入一个分布式锁，如果加锁成功，就执行业务，如果加锁失败就等待锁或者拒绝请求。业务执行完成后释放锁。

2021-08-30 18:20:58

Redis分布式锁面试
主流关系型分布式数据库选型与设计实战
笔者最早是作为MySQL DBA入行，从事了5年分布式数据库运维、自动化开发的工作，在大规模数据库集群的管理方面积累了经验

2021-08-30 11:21:03

数据库工具技术
分布式计算引擎 Flink/Spark on k8s 的实现对比以及实践
以 Flink 和 Spark 为代表的分布式流批计算框架的下层资源管理平台逐渐从 Hadoop 生态的 YARN 转向 Kubernetes 生态的 k8s 原生 scheduler 以及周边资源调度器，比如 Volcano 和 Yunikorn 等。这篇文章简单比较一下两种计算框架在 Native Kubernetes 的支持和实现上的异同，以及对于应用到生产环境我们还需要做些什么。

2021-08-30 10:28:09

FlinkSpark on k8分布式
Longhorn云原生容器分布式存储-Air Gap安装
Longhorn 可以通过使用 manifest file、Helm chart 或 Rancher UI 安装在 air gapped 环境中。

2021-08-29 23:53:32

存储Air Gap安装
Longhorn，企业级云原生容器分布式存储 - 定制部署默认设置
您可以在部署 Longhorn 时自定义它的默认设置。例如，您可以在启动 Longhorn 之前指定 Create Default Disk With Node Labeled(创建带有节点标签的默认磁盘) 和 Default Data Path(默认数据路径)。

2021-08-28 05:04:19

存储云原生分布式
HarmonyOS基础技术赋能之分布式数据服务功能
分布式数据服务(Distributed Data Service，DDS) 为应用程序提供不同设备间数据库数据分布式的能力。通过调用分布式数据接口，应用程序将数据保存到分布式数据库中。

2021-08-27 09:57:18

鸿蒙HarmonyOS应用
Longhorn，企业级云原生容器分布式存储 - 支持 ReadWriteMany (RWX) 工作负载
Longhorn 通过 NFSv4 服务器(share-manager)公开常规 Longhorn 卷，原生支持 RWX 工作负载。

2021-08-26 23:54:46

分布式存储负载
大数据之分布式协调神器：Zookeeper选举
分布式系统设计成主从节点主要是为了保障数据一致性，主从设计是一种最直观的数据一致性保障机制。

2021-08-26 08:03:30

大数据Zookeeper选举
万字长文说透分布式锁
“分布式锁”这个问题快被说烂了，奈何笔者实在没有找到一个满意的答案，故记录自己寻找答案、总结的过程。分布式锁的设计涉及了许多分布式系统相关的问题，许多地方值得推敲，非常有意思。

2021-08-26 05:02:50

分布式锁设计
Longhorn，企业级云原生容器分布式存储 - 高可用
数据局部性设置(data locality setting)旨在在以下情况下启用：只要有可能，至少应在与使用该卷的 pod 相同的节点上调度 Longhorn 卷的一个副本。我们将拥有本地副本的特性称为具有 data locality。

2021-08-26 00:23:14

分布式存储高可用
Longhorn，企业级云原生容器分布式存储之备份与恢复
Longhorn 提供了 allow-recurring-job-while-volume-detached 设置，即使卷已分离，您也可以进行周期性备份(recurring backup)。您可以在 Longhorn UI 中找到该设置。

2021-08-25 05:05:26

存储 备份恢复
HarmonyOS Sample 之 DistributedMusicPlayer分布式音乐播放器
本示例主要演示了如何通过迁移数据进行音乐的分布式播放。实现了音乐播放的跨设备迁移，包括：播放哪首歌曲、播放进度、以及播放状态的保持。

2021-08-24 15:13:06

鸿蒙HarmonyOS应用
Longhorn，企业级云原生容器分布式存储之监控
Longhorn 在 REST 端点 http://LONGHORN_MANAGER_IP:PORT/metrics 上以 Prometheus 文本格式原生公开指标。有关所有可用指标的说明，请参阅 Longhorn's metrics。

2021-08-24 05:02:34

云原生容器分布式
Web3.0时代区块链分布式存储的作用和影响
如何确保数据拥有足够存储空间，如何保障数据安全，提升传输速度无疑是重中之重。今天我们从全新视角讲述“Web3.0时代区块链分布式存储的价值和意义”。

2021-08-20 20:16:08

区块链Web3.0分布式存储
用鸿蒙的分布式助力七夕
如果升级了最新的B站服务卡片，那么当桌面上添加头像卡片时，只要点击头像，就会看到下图的效果。一个应用鸿蒙分布式能力的小功能。

2021-08-20 14:26:17

鸿蒙HarmonyOS应用
关基保护条例重磅发布 360呼吁构建国家级分布式安全大脑
三六零公司创始人、董事长周鸿祎表示，关基保护条例回应了国家对网络安全的重大关切，是我国数字经济的底线和红线，是提高我国网络安全防御水平的重要举措，是建设网络强国的战略部署。

2021-08-19 16:05:44

关基保护条例／安全大脑
Longhorn 云原生分布式块存储解决方案设计架构和概念
Longhorn 设计有两层：数据平面(data plane)和控制平面(control plane)。Longhorn Engine 是存储控制器对应数据平面，Longhorn Manager 对应控制平面。

2021-08-17 12:36:21

Longhorn云原生存储
解密万亿参数M6模型预训练背后的分布式框架Whale
M6是国内首个实现商业化落地的多模态大模型。M6拥有超越传统AI的认知和创造能力，擅长绘画、写作、问答，在电商、制造业、文学艺术等诸多领域拥有广泛应用前景。

2021-08-17 11:08:08

参数M6模型
Longhorn，Kubernetes 云原生分布式块存储
Longhorn 使用容器(containers)和微服务(microservices)实现分布式块存储。 Longhorn 为每个块设备卷(device volume)创建一个专用的存储控制器(storage controller)， 并跨存储在多个节点上的多个副本同步复制该卷。存储控制器(storage controller)和副本(replicas)本身是使用 Kubernetes 编排的。

2021-08-17 00:24:38

块存储云原生分布式
五分钟带你体验一把分布式事务！so easy！
分布式事务涉及到很多理论，如 CAP，BASE 等，很多小伙伴刚看到这些理论就被劝退了，所以我们今天不讲理论，咱们就看个 Demo，通过代码快速体验一把什么是分布式事务。

2021-08-16 15:40:04

分布式架构系统
HarmonyOS小游戏：吃豆豆---基于分布式数据库与分布式任务调度
本次学习笔记记录了吃豆豆的游戏实现，最近学习到的UI设置，页面跳转，分布式数据库，分布式任务调度等内容。作为我的第一个实践的项目，项目或多或少会有小问题和一些还没有解决的问题。

2021-08-16 09:55:41

鸿蒙HarmonyOS应用
基于跨设备迁移和分布式文件能力的DistributedMail解析
Distributed Server分布式版本主要服务于在各地设有分部的政府机构、大型集团公司以及百万用户级别的大型电子邮件运营商。

2021-08-13 13:53:23

鸿蒙HarmonyOS应用
AnalyticDB PostgreSQL 教你实现分布式一致性备份恢复
ADB PG 是采用MPP水平扩展架构的分布式数据库。ADB PG实例由一个或多个协调节点(Master)和多个计算节点(Compute Node)组成，协调节点负责接收用户请求，制定分布式执行计划并下发至计算节点，收集执行结果并返回给客户端；计算节点负责并行计算分析与数据存储。

2021-08-13 11:50:23

AnalyticDB 分布式数据库
博睿数据分布式手机真机监测+两大核心技术，轻松掌控短信服务质量与用户体验
2021年8月10日，博睿数据首次在业界倡导构建中立、客观、有效评估企业短信服务质量与用户体验体系的构想。通过Bonree Net短信网关监测产品，基于博睿数据的WAP会员能力，提供遍布全国各省市的10000+稳定在线的真机短信监测节点，以及智能化任务调度和深度数据识别采集两项核心技术，助力企业轻松掌控短信服务质量与用户体验。

2021-08-12 16:47:02

博睿数据短信监测
Ceph分布式存储系统优化分析
本文介绍了Ceph分布式存储系统的发展历史和特点，并从内部优化机制、面向硬件设备和应用场景这3个方面梳理了现有的性能优化方法。作为一个开源的统一存储系统，Ceph提供了高性能、高可扩展性和高可用的块、文件和对象存取功能。

2021-08-07 05:00:20

存储系统
瑞驰分布式存储为安徽广电护航
瑞驰集群存储并行模式让所有IO节点同时工作来提供性能，大幅度提高了存储系统性能，保障平台稳定运行。

2021-08-06 08:52:17

数字化
Springboot之分布式事务框架Seata实现原理源码分析
Spring Boot是由Pivotal团队提供的全新框架，其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置，从而使开发人员不再需要定义样板化的配置。

2021-08-06 08:33:27

Springboot分布式Seata
分布式系统咋做同步？虐死人！
分布式系统，通过数据冗余，来保证数据的安全。要写一个分布式系统，一道绕不过去的坎，那就是数据同步。

2021-08-04 20:37:29

分布式系统同步
七种分布式全局 ID 生成策略，你更爱哪种？
当数据库分库分表之后，原本的主键自增就不方便继续使用了，需要找到一个新的合适的方案，松哥的需求就是在这样的情况下提出的。

2021-08-04 10:38:51

分布式 ID策略
分布式存储系统可靠性：系统量化估算
们常常听到衡量分布式存储系统好坏的两个指标：可用性和可靠性指标。本文就重点来分析一下分布式系统的数据可靠性的量化模型。

2021-07-30 09:49:17

分布式架构系统
数据库为何又如何走向分布式？
数据库领域图灵奖获得者 Jim Gray 说过：“所有的存储系统最终都会演变成数据库系统。(All storage systems will eventually evolve to be database systems.)”

2021-07-30 06:58:28

数据库分布式映射
基于Redis的分布式锁和Redlock算法
在单进程的系统中，当存在多个线程可以同时改变某个变量(可变共享变量)时，就需要对变量或代码块做同步，使其在修改这种变量时能够线性执行消除并发修改变量。

2021-07-30 00:09:21

Redlock算法Redis
分布式协调框架Zookeeper核心设计理解与实战
想起很久以前在某个客户现场，微服务 B 突然无法调用到微服务 A，为了使服务尽快正常恢复，重启了微服务 B 。虽然故障原因找到了，但对于 Zookeeper 的理解还是不够深刻，于是重新学习了 Zookeeper 的核心设计，并记录于此文共勉。

2021-07-29 07:48:36

Zookeeper 核心设计
分布式系统的“脑裂”到底是个什么玩意？
目前大多数项目都在往分布式上发展，一旦系统采用分布式系统，便会引入更多复杂场景和解决方案。比如，当你在系统中使用了Elasticsearch、ZooKeeper集群时，你是否了解过集群的“脑裂”现象?又是否知道它们是如何解决脑裂问题的?

2021-07-29 06:56:36

分布式系统脑裂
分布式系统中的一致性模型
最近看到的一篇超棒的关于分布式系统中强一致性模型的blog，实在没有不分享的道理。最近比较闲，所以干脆把它翻译了，一是为了精读，二是为了更友好地分享。

2021-07-28 08:39:25

分布式架构系统
深度剖析：Redis分布式锁安全吗？
这篇文章，我们主要探讨了基于 Redis 实现的分布式锁，究竟是否安全这个问题。

2021-07-26 11:09:46

Redis分布式技术
HarmonyOS 分布式新闻分享
本篇Codelab中我们介绍了应用的主页面和详情页，在主页面可以通过顶部的新闻类型切换不同类别的新闻，同时下面整个新闻列表项也会跟随切换。

2021-07-23 08:57:32

鸿蒙HarmonyOS应用
HarmonyOS 分布式亲子教育
本篇Codelab通过一个亲子早教系统，完整的为您介绍了早教算数题和益智拼图游戏两个综合案例，旨在帮助您快速了解HarmonyOS应用开发、多屏互动、分布式跨设备协同的功能了解。

2021-07-22 10:20:21

鸿蒙HarmonyOS应用
八卦一下快手Bagua：突破TensorFlow、PyTorch并行瓶颈的分布式训练框架
近日，快手和苏黎世理工宣布开源分布式训练框架 Bagua（八卦），相比于 PyTorch、TensorFlow 等现有深度学习开源框架仅针对系统层面进行优化，Bagua 突破了这一点，专门针对分布式场景设计了特定的优化算法，实现了算法和系统层面的联合优化，性能较同类提升 60%。

2021-07-19 11:56:56

分布式训练框架
RocketMQ千锤百炼 哈啰在分布式消息治理和微服务治理中的实践
哈啰已进化为包括两轮出行(哈啰单车、哈啰助力车、哈啰电动车、小哈换电)、四轮出行(哈啰顺风车、全网叫车、哈啰打车)等的综合化移动出行平台，并向酒店、到店团购等众多本地生活化生态探索。

2021-07-16 13:11:10

分布式消息微服务
上一页 1 23456 ··· 27
点赞

51CTO技术栈公众号

业务
速览
在线客服