鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

分布式

1357内容

关注

涵盖分布式相关研究热点、技术难点与应用场景。

文章博文课程

共 1357 条

分布式事务知识小结

PC 和 3PC 是一种强一致性事务，不过还是有数据不一致，阻塞等风险，而且只能用在数据库层面。

2021-09-29 09:07:37

分布式架构系统

泛在千兆，引领5G室内新趋势—— 华为5G室内分布式Massive MIMO荣获最佳解决方案案例

针对高容量、高密度的场馆、交纽场景，传统解决方案主要是通过密集部署室内基站以及增加频率复用来提升容量

2021-09-28 16:57:31

华为云GaussDB：用分布式计算和存算分离的集合力量打造云原生数据库

近期，创原会在杭州千岛湖成功举办云原生技术精英沙龙，来自云原生计算基金会（CNCF）、中国信通院、华为以及各行业的云原生技术精英们共聚一堂，就云原生与企业业务融合的无限可能进行了深入研讨。

2021-09-28 10:42:41

华为云 GaussDB

微服务架构下的分布式事务解决方案

微服务架构是一个分布式的系统，按业务进行划分为独立的服务单元，解决单体系统的不足，同时也满足越来越复杂的业务需求。每个微服务仅关注于完成一件任务并很好地完成该任务。

2021-09-28 09:43:11

微服务架构技术

聊聊Redis分布式锁的八大坑

在分布式系统中，由于redis分布式锁相对于更简单和高效，成为了分布式锁的首先，被我们用到了很多实际业务场景当中。今天我们就一起聊聊redis分布式锁的一些坑，给有需要的朋友一个参考。

2021-09-26 09:16:45

Redis Geo 类型数据类型

基于 MaxCompute 分布式 Python 能力的大规模数据科学分析

Python的趋势是呈现上涨趋势，特别是在数据分析和数据科学领域，几乎是top one的编程语言。这是Python生态的发展趋势。当然，在数据分析数据科学机器学习这个领域，不只是有编程语言这一个因素。

2021-09-24 11:34:44

MaxCompute Python 数据分析

扬帆大数据时代，英特尔携手星环打造全闪存分布式数据库

近年来，星环科技与英特尔进行了广泛而深入的合作，不但持续在英特尔架构上优化大数据、云计算和人工智能产品，还合作加快第三代英特尔至强可扩展处理器的应用落地。

2021-09-23 16:10:06

数据库工具技术

超全面 Redis 分布式高可用方案：哨兵机制

开发工作中对于分布式缓存高可用方案（搭建 Redis 缓存高可用方案），Redis 主从架构下是如何保证高可用的呢？

2021-09-23 12:14:50

Redis 分布式优化

难言之隐，分布式存储软硬件解耦究竟难在哪里？

在较长一段时间内，分布式存储软硬件一体和软硬件解耦会长期共存。随着数据价值的增高，场景对数据可靠性的要求随之会越来越严苛，市场的天平就会更多偏向软硬件一体；与此相反，场景对数据可靠性的敏感度越低、短期成本敏感度越高，市场的天平就会更多的偏向软硬件解耦。

2021-09-18 10:51:09

分布式存储

聊聊分布式锁——Redis和Redisson的方式

synchronized 是用在方法或代码块中的，我们把它叫『线程锁』，线程锁的实现其实是靠线程之间共享内存实现的，说白了就是内存中的一个整型数，有空闲、上锁这类状态，比如 synchronized 是在对象头中的 Mark Word 有个锁状态标志，Lock 的实现类大部分都有个叫 volatile int state 的共享变量来做状态标志。

2021-09-17 07:51:24

Redisson Redis 分布式

用Go轻松完成一个XA分布式事务，保姆级教程

如果一个事务涉及的所有操作能够放在一个服务内部，那么使用各门语言里事务相关的库，可以轻松的实现多个操作作为整体的事务操作。

2021-09-14 13:55:15

Go 开发分布式

Redis分布式锁解决多进程/多线程下单个进程/单个线程运行

最近，有两台容器，当程序运行时，会发送多份通知，那么需要保证同一时刻只有一个进程(一台容器)来运行，此时用分布式锁解决该问题。

2021-09-10 21:25:43

Redis 分布式锁

机器学习分布式框架Ray

Ray是UC Berkeley RISELab新推出的高性能分布式执行框架，具有比Spark更优异的计算性能，而且部署和改造更简单，同时支持机器学习和深度学习的分布式训练，支持主流的深度学习框架。

2021-09-09 15:45:17

机器学习人工智能 Ray

EverDB之分布式执行计划

我们通过“EXPLAIN + SQL”指令可以详细地查看其执行计划，找到性能瓶颈，为我们优化SQL提供方向和依据。本文将从EverDB分布式数据库角度阐述执行计划。

2021-09-07 10:43:25

EverDB 分布式执行

用 Python 轻松完成一个 Saga 分布式事务

在这篇文章里，我们介绍了 SAGA 的理论知识，也通过一个例子，完整给出了编写一个 SAGA 事务的过程，涵盖了正常成功完成，异常情况，以及成功回滚的情况。

2021-09-07 09:26:13

Python 开发编程语言

哪种分布式事务处理方案效率最高？必然是...

在微服务系统中，服务之间的互相调用，我们可以使用 HTTP 的方式，例如 OpenFeign，也可以使用 RPC 的方式，例如 Dubbo，除了这些方案之外，我们也可以使用消息驱动，这是一种典型的响应式系统设计方案。

2021-09-03 10:37:35

分布式事务处理

Longhorn 云原生容器分布式存储 - Python Client

如果您在本地机器上运行自动化/脚本(automation/scripting)工具，请使用 kubectl port-forward 将 longhorn-frontend service 转发到 localhost。

2021-09-03 05:00:28

分布式存储云原生

照抄不翻车：抗住千万流量的大型分布式系统架构设计

本文是学习大型分布式网站架构的技术总结。对架构一个高性能、高可用、可伸缩及可扩展的分布式网站进行了概要性描述，并给出一个架构参考。文中一部分为读书笔记，一部分是个人经验总结，对大型分布式网站架构有较好的参考价值。

2021-09-02 10:37:53

分布式大型网站架构

分布式云选择移动工作负载可以提供什么优势？

云用户受益于将运行硬件和软件基础设施的责任转移给提供商。他们可以利用云弹性的经济性，并从云供应商的快速创新中获益。

2021-09-01 09:19:53

分布式云云计算云存储

分布式身份服务，权威隐私保护

互联网+的时代不断发展，可以说现在全球都是互联网的覆盖范围。大到各个国家的政策，小到每个个体的身份，都从线下转移到了线上。

2021-08-31 22:52:40

区块链互联网技术

华为云拉美发布十余款新品，覆盖分布式云、云原生、大数据、AI等领域

近期，华为云举办拉美两周年庆系列活动，并携手客户及伙伴分享数字化转型及智能升级实践经验。8月30日-9月3日，华为云逐步面向拉美首次发布智能边缘云IEC、智能边缘平台IEF、企业级云网络解决方案KYON、函数计算服务FunctionGraph2.0、多云容器平台MCP、应用服务网格ASM、容器安全服务CGS、GaussDB数据库、企业级AI开发平台ModelArts Pro、云视频服务等明星服务，覆盖分布式云、云原生、大数据、人工智能、音视频等领域。

2021-08-31 11:53:00

华为云云原生分布式云

简单的方式创建分布式应用程序

Ray 是基于 Python 的分布式计算框架，采用动态图计算模型，提供简单、通用的 API 来创建分布式应用。使用起来很方便，你可以通过装饰器的方式，仅需修改极少的的代码，让原本运行在单机的 Python 代码轻松实现分布式计算，目前多用于机器学习。

2021-08-30 20:19:55

HarmonyOSJS分布式能力—学习笔记

JS也是具有分布式能力的，本文就以两个小项目来分享JS的分布式拉起和分布式迁移♪(∇*),分布式拉起允许拉起一个本地或远程的FA，拉起时可以传递参数。

2021-08-30 18:36:33

鸿蒙 HarmonyOS 应用

阿里二面：Redis分布式锁过期了但业务还没有执行完，怎么办

我们使用了redis的分布式锁。具体做法是后端接收到请求后加入一个分布式锁，如果加锁成功，就执行业务，如果加锁失败就等待锁或者拒绝请求。业务执行完成后释放锁。

2021-08-30 18:20:58

Redis 分布式锁面试

主流关系型分布式数据库选型与设计实战

笔者最早是作为MySQL DBA入行，从事了5年分布式数据库运维、自动化开发的工作，在大规模数据库集群的管理方面积累了经验

2021-08-30 11:21:03

数据库工具技术

分布式计算引擎 Flink/Spark on k8s 的实现对比以及实践

以 Flink 和 Spark 为代表的分布式流批计算框架的下层资源管理平台逐渐从 Hadoop 生态的 YARN 转向 Kubernetes 生态的 k8s 原生 scheduler 以及周边资源调度器，比如 Volcano 和 Yunikorn 等。这篇文章简单比较一下两种计算框架在 Native Kubernetes 的支持和实现上的异同，以及对于应用到生产环境我们还需要做些什么。

2021-08-30 10:28:09

Flink Spark on k8 分布式

Longhorn云原生容器分布式存储-Air Gap安装

Longhorn 可以通过使用 manifest file、Helm chart 或 Rancher UI 安装在 air gapped 环境中。

2021-08-29 23:53:32

存储 Air Gap 安装

Longhorn，企业级云原生容器分布式存储 - 定制部署默认设置

您可以在部署 Longhorn 时自定义它的默认设置。例如，您可以在启动 Longhorn 之前指定 Create Default Disk With Node Labeled(创建带有节点标签的默认磁盘) 和 Default Data Path(默认数据路径)。

2021-08-28 05:04:19

存储云原生分布式

HarmonyOS基础技术赋能之分布式数据服务功能

分布式数据服务(Distributed Data Service，DDS) 为应用程序提供不同设备间数据库数据分布式的能力。通过调用分布式数据接口，应用程序将数据保存到分布式数据库中。

2021-08-27 09:57:18

鸿蒙 HarmonyOS 应用

Longhorn，企业级云原生容器分布式存储 - 支持 ReadWriteMany (RWX) 工作负载

Longhorn 通过 NFSv4 服务器(share-manager)公开常规 Longhorn 卷，原生支持 RWX 工作负载。

2021-08-26 23:54:46

分布式存储负载

大数据之分布式协调神器：Zookeeper选举

分布式系统设计成主从节点主要是为了保障数据一致性，主从设计是一种最直观的数据一致性保障机制。

2021-08-26 08:03:30

大数据 Zookeeper 选举

万字长文说透分布式锁

“分布式锁”这个问题快被说烂了，奈何笔者实在没有找到一个满意的答案，故记录自己寻找答案、总结的过程。分布式锁的设计涉及了许多分布式系统相关的问题，许多地方值得推敲，非常有意思。

2021-08-26 05:02:50

分布式锁设计

Longhorn，企业级云原生容器分布式存储 - 高可用

数据局部性设置(data locality setting)旨在在以下情况下启用：只要有可能，至少应在与使用该卷的 pod 相同的节点上调度 Longhorn 卷的一个副本。我们将拥有本地副本的特性称为具有 data locality。

2021-08-26 00:23:14

分布式存储高可用

Longhorn，企业级云原生容器分布式存储之备份与恢复

Longhorn 提供了 allow-recurring-job-while-volume-detached 设置，即使卷已分离，您也可以进行周期性备份(recurring backup)。您可以在 Longhorn UI 中找到该设置。

2021-08-25 05:05:26

存储备份恢复

HarmonyOS Sample 之 DistributedMusicPlayer分布式音乐播放器

本示例主要演示了如何通过迁移数据进行音乐的分布式播放。实现了音乐播放的跨设备迁移，包括：播放哪首歌曲、播放进度、以及播放状态的保持。

2021-08-24 15:13:06

鸿蒙 HarmonyOS 应用

Longhorn，企业级云原生容器分布式存储之监控

Longhorn 在 REST 端点 http://LONGHORN_MANAGER_IP:PORT/metrics 上以 Prometheus 文本格式原生公开指标。有关所有可用指标的说明，请参阅 Longhorn's metrics。

2021-08-24 05:02:34

云原生容器分布式

Web3.0时代区块链分布式存储的作用和影响

如何确保数据拥有足够存储空间，如何保障数据安全，提升传输速度无疑是重中之重。今天我们从全新视角讲述“Web3.0时代区块链分布式存储的价值和意义”。

2021-08-20 20:16:08

区块链 Web3.0 分布式存储

用鸿蒙的分布式助力七夕

如果升级了最新的B站服务卡片，那么当桌面上添加头像卡片时，只要点击头像，就会看到下图的效果。一个应用鸿蒙分布式能力的小功能。

2021-08-20 14:26:17

鸿蒙 HarmonyOS 应用

关基保护条例重磅发布 360呼吁构建国家级分布式安全大脑

三六零公司创始人、董事长周鸿祎表示，关基保护条例回应了国家对网络安全的重大关切，是我国数字经济的底线和红线，是提高我国网络安全防御水平的重要举措，是建设网络强国的战略部署。

2021-08-19 16:05:44

关基保护条例／安全大脑

Longhorn 云原生分布式块存储解决方案设计架构和概念

Longhorn 设计有两层：数据平面(data plane)和控制平面(control plane)。Longhorn Engine 是存储控制器对应数据平面，Longhorn Manager 对应控制平面。

2021-08-17 12:36:21

Longhorn 云原生存储

解密万亿参数M6模型预训练背后的分布式框架Whale

M6是国内首个实现商业化落地的多模态大模型。M6拥有超越传统AI的认知和创造能力，擅长绘画、写作、问答，在电商、制造业、文学艺术等诸多领域拥有广泛应用前景。

2021-08-17 11:08:08

参数 M6 模型

Longhorn，Kubernetes 云原生分布式块存储

Longhorn 使用容器(containers)和微服务(microservices)实现分布式块存储。 Longhorn 为每个块设备卷(device volume)创建一个专用的存储控制器(storage controller)，并跨存储在多个节点上的多个副本同步复制该卷。存储控制器(storage controller)和副本(replicas)本身是使用 Kubernetes 编排的。

2021-08-17 00:24:38

块存储云原生分布式

五分钟带你体验一把分布式事务！so easy！

分布式事务涉及到很多理论，如 CAP，BASE 等，很多小伙伴刚看到这些理论就被劝退了，所以我们今天不讲理论，咱们就看个 Demo，通过代码快速体验一把什么是分布式事务。

2021-08-16 15:40:04

分布式架构系统

HarmonyOS小游戏：吃豆豆---基于分布式数据库与分布式任务调度

本次学习笔记记录了吃豆豆的游戏实现，最近学习到的UI设置，页面跳转，分布式数据库，分布式任务调度等内容。作为我的第一个实践的项目，项目或多或少会有小问题和一些还没有解决的问题。

2021-08-16 09:55:41

鸿蒙 HarmonyOS 应用

基于跨设备迁移和分布式文件能力的DistributedMail解析

Distributed Server分布式版本主要服务于在各地设有分部的政府机构、大型集团公司以及百万用户级别的大型电子邮件运营商。

2021-08-13 13:53:23

鸿蒙 HarmonyOS 应用

AnalyticDB PostgreSQL 教你实现分布式一致性备份恢复

ADB PG 是采用MPP水平扩展架构的分布式数据库。ADB PG实例由一个或多个协调节点(Master)和多个计算节点(Compute Node)组成，协调节点负责接收用户请求，制定分布式执行计划并下发至计算节点，收集执行结果并返回给客户端；计算节点负责并行计算分析与数据存储。

2021-08-13 11:50:23

AnalyticDB 分布式数据库

博睿数据分布式手机真机监测+两大核心技术，轻松掌控短信服务质量与用户体验

2021年8月10日，博睿数据首次在业界倡导构建中立、客观、有效评估企业短信服务质量与用户体验体系的构想。通过Bonree Net短信网关监测产品，基于博睿数据的WAP会员能力，提供遍布全国各省市的10000+稳定在线的真机短信监测节点，以及智能化任务调度和深度数据识别采集两项核心技术，助力企业轻松掌控短信服务质量与用户体验。

2021-08-12 16:47:02

博睿数据短信监测

Ceph分布式存储系统优化分析

本文介绍了Ceph分布式存储系统的发展历史和特点，并从内部优化机制、面向硬件设备和应用场景这3个方面梳理了现有的性能优化方法。作为一个开源的统一存储系统，Ceph提供了高性能、高可扩展性和高可用的块、文件和对象存取功能。

2021-08-07 05:00:20

瑞驰分布式存储为安徽广电护航

瑞驰集群存储并行模式让所有IO节点同时工作来提供性能，大幅度提高了存储系统性能，保障平台稳定运行。

2021-08-06 08:52:17

Springboot之分布式事务框架Seata实现原理源码分析

Spring Boot是由Pivotal团队提供的全新框架，其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置，从而使开发人员不再需要定义样板化的配置。

2021-08-06 08:33:27

Springboot 分布式 Seata

上一页 1 2 3 4 5 6 ··· 28 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营