鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

分布式

1376内容

关注

涵盖分布式相关研究热点、技术难点与应用场景。

文章博文课程

共 1376 条

分布式跟踪系统的四大功能模块如何协同工作

本文介绍了分布式跟踪系统中四个（可能）独立的功能模块，并描述了它们间将如何协同工作。

2020-02-03 12:46:11

分布式跟踪分布式跟踪系统系统架构

聊一聊分布式系统原理

在具体的工程项目中，一个节点往往是一个操作系统上的进程。在本文的模型中，认为节点是一个完整的、不可分的整体，如果某个程序进程实际上由若干相对独立部分构成，则在模型中可以将一个进程划分为多个节点。

2020-01-17 09:07:14

分布式系统网络

大脑也在用分布式强化学习？DeepMind新研究登上《Nature》

分布式强化学习是智能体在围棋、星际争霸等游戏中用到的技术，但 DeepMind 的一项研究表明，这种学习方式也为大脑中的奖励机制提供了一种新的解释，即大脑也应用了这种算法。

2020-01-16 15:57:36

AI 数据人工智能

大到阿里，小到三线公司，缓存在大型分布式系统中的应用

缓存是分布式系统中的重要组件，主要解决高并发，大数据场景下，热点数据访问的性能问题。提供高性能的数据快速访问。

2020-01-07 15:17:18

缓存分布式系统

杉岩数据2020年分布式存储技术研讨会顺利举办

大数据时代，数据产生场景增加、存储需求爆发增长。据权威咨询机构预测，未来超过95%的数据属非结构化数据，传统存储无法满足爆发式增长的数据存储需求，软件定义存储才是解决之道。而近几年，政府大力推行互联网+政务，对信息安全、国产化要求愈加明显。

2020-01-06 19:04:49

复杂分布式架构下的计算治理之路

在当前的复杂分布式架构环境下，服务治理已经大行其道。但目光往下一层，从上层 APP、Service，到底层计算引擎这一层面，却还是各个引擎各自为政，Client-Server模式紧耦合满天飞的情况。

2020-01-06 10:41:52

分布式架构治理

一文看懂金融级分布式数据库架构设计原创

银行业从最初的手工记账到会计电算化，到金融电子化，再到现在的金融科技，可以看到金融与科技的结合越来越紧密，人工智能、大数据、物联网、区块链等新兴技术改变了金融的交易方式，为金融行业的创新前行提供了源源不断的动力。同时互联网金融的兴起是一把双刃剑，带来了机遇的同时也带来了挑战。

2020-01-03 09:00:00

数据库数据库管理金融

分布式文件系统之Ceph硬件

Ceph 元数据服务器对 CPU 敏感，它会动态地重分布它们的负载，所以你的元数据服务器应该有足够的处理能力(我们生产使用的是2C双12核心CPU)。

2020-01-03 08:33:57

Ceph 硬件系统

如何实现一个通用的分布式事务框架？

本文将以Spring容器为例，试图分析一下，实现一个通用的TCC分布式事务框架需要注意的一些问题。

2019-12-27 16:00:56

分布式事务框架 Java

滴滴开源千万级并发的分布式ID生成器

Tinyid是一个ID生成器服务，它提供了REST API和Java客户端两种获取方式，如果使用Java客户端获取方式的话，官方宣称能单实例能达到1kw QPS。

2019-12-27 10:00:34

开源技术软件

分布式系统之Redis主从架构

对于缓存来说，一般都是用来支撑读高并发的。因此架构做成主从(master-slave)架构，一主多从，主负责写，并且将数据复制到其它的 slave 节点，从节点负责读。

2019-12-26 08:59:20

Redis 主从架构

锁的基本概念到Redis分布式锁实现

近来，分布式的问题被广泛提及，比如分布式事务、分布式框架、ZooKeeper、SpringCloud等等。

2019-12-25 14:35:33

分布式架构系统

北京的凛冬，分布式存储硬件却迎来了春天

凛冽的寒冬，北京悠唐皇冠假日酒店，2019年中国存储与数据峰会如期而至。

2019-12-20 20:13:01

分布式存储

我们是怎样打造一款分布式数据库的

关系型数据库在过去数十年的数据库领域一直占据着绝对主导的地位，它所带来的稳定性、安全性和易用性，成为了构建现代化系统的基石。

2019-12-18 10:24:10

数据库 PostgreSQL Oracle

服务端高并发分布式架构演进之路

本文以淘宝作为例子，介绍从一百个到千万级并发情况下服务端的架构的演进过程，同时列举出每个演进阶段会遇到的相关技术，让大家对架构的演进有一个整体的认知，文章最后汇总了一些架构设计的原则。

2019-12-17 11:18:37

高并发分布式架构

基础普及之什么是分布式SQL 译文

本文向您介绍分布式SQL的基本概念，其对应的数据库架构，以及对于业务应用的各种优势。

2019-12-13 08:00:00

分布式SQL 数据库架构

区块链分布式存储到底好在哪？四大优势不可不知

存储并不是个新词，随着互联网技术的快速发展，企业级存储、云存储等已成为人们工作生活的标配。与此同时，伴随区块链技术的发展与成熟，区块链存储的优势和特点开始受到多方关注。

2019-12-12 11:44:34

区块链分布式比特币

如果有人再问你怎么实现分布式延时消息，这篇文章丢给他

我们实现本地延时比较简单，直接使用Java中现成的即可，那我们分布式消息队列的实现有哪些难点呢?

2019-12-10 09:08:29

分布式开源 RocketMQ

分布式与集群是一回事儿么？别让这么简单的问题难住你

一个业务，部署在多台服务器上，这就是集群。这里的一个业务，可以直接看做一个程序包。

2019-12-06 10:44:27

分布式集群业务

分布式缓存的高可用方案，我们都是这么做的

我们讲到了当我们的系统面临持续增加的并发给我们的数据库磁盘IO带了了性能瓶颈，特此为我们的系统引入了缓存，并且学习了我们在开发中该怎么去正确的使用缓存的读写策略，同时结合案例给出一些建议防止数据不一致的情况，那我们的系统现在就是这样的架构了。

2019-12-04 14:59:01

分布式缓存高可用

浅谈分布式存储系统的数据分布算法，来了解一下吧！

无论上层接口是 KV 存储、对象存储、块存储、亦或是列存储，在这个问题上大体是一致的。本文将介绍如何分布式存储系统中做数据分布目标及可选的方案，并试着总结和权衡他们之间的关系及。

2019-11-27 11:27:52

分布式存储系统

十分钟看懂分布式架构的前世今生

对于每一个程序员来说，大家一听分布式架构，一般第一反应都是，高端霸气上档次。例如阿里巴巴的各个系统都部署在不同的机器上，并且还分布在杭州、上海、深圳等不同的服务器上。华为的服务器也会分布在世界不同的区域，从而保证满足全球用户的使用。

2019-11-25 09:32:26

软件程序员数据结构

华为GaussDB数据库推出双分布式架构，打造金融核心智能生产交易解决方案

在2019全球数据基础设施论坛金融峰会上，华为发布GaussDB OLTP数据库双分布式新架构。基于该创新架构与原创内核，华为面向金融行业核心生产交易系统，提供数据库产品与金融解决方案，保证金融核心数据实时可靠处理。

2019-11-21 16:51:59

数据库 GaussDB 华为

深入浅出百亿请求高可用Redis(codis)分布式集群揭秘

本文主要讲解codis是如何做到对业务无感知，平滑迁移，迁移性能高，迁移异常处理，高可用以及常见的redis的避坑指南。

2019-11-21 10:25:28

分布式架构系统

区块链的颠覆力量之四：分布式智能身份认证系统

之前的文章中，我们已经阐述了政府信息管理中如果引入区块链的方式，但在日常生活中，我们最难处理的可能并不是这种复杂的事件，而是最基础的个人身份确认问题。

2019-11-20 15:34:16

区块链金融去中心化

全面讲解分布式数据库架构设计特点原创

数据库作为基础软件中的重要一环有着很深的技术含量，在这样的大背景下国产数据库厂商开始发力，这其中分布式数据库如雨后春笋般出现，良性的竞争环境使它们都得到了长足的发展，其中不乏优秀的产品，本文主要挑选目前几个相对成熟数据库进行架构特点介绍。

2019-11-19 09:00:00

数据库架构设计

关于Zookeeper的分布式事务，你懂吗？

事务提供一种机制将一个活动涉及的所有操作纳入到一个不可分割的执行单元，组成事务的所有操作只有在所有操作均能正常执行的情况下方能提交，只要其中任一操作执行失败，都将导致整个事务的回滚。

2019-11-19 08:47:45

Zookeeper 分布式事务

深度剖析阿里数据库内核：基于HLC的分布式事务实现

分布式事务是分布式数据库最难攻克的技术之一，分布式事务为分布式数据库提供一致性数据访问的支持，保证全局读写原子性和隔离性，提供一体化分布式数据库的用户体验。

2019-11-19 08:32:26

数据库 HLC 事务

看大数据大佬手把手带你实现基于Zookeeper、Redis的分布式锁

在分布式系统中，分布式锁是为了解决多实例之间的同步问题。例如master选举，能够获取分布式锁的就是master，获取失败的就是slave。又或者能够获取锁的实例能够完成特定的操作。

2019-11-18 14:16:10

Zookeeper Redis 大数据

深入解析：分布式系统的事务处理经典问题及模型

数据服务的高可用是所有企业都想拥有的，但是要想让数据有高可用性，就需要冗余数据写多份。写多份的问题会带来一致性的问题，而一致性的问题又会带来性能问题，这就会陷入一个无解的死循环!这里所谓数据一致性，就是当多个用户试图同时访问一个数据库时，如果它们的事务同时使用相同的数据，可能会发生以下四种情况：丢失更新、未确定的相关性、不一致的分析和幻像读。

2019-11-18 10:19:02

分布式系统事务模型

实现最简单的分布式任务调度框架

前段时间，公司要改造现有的单节点调度为分布式任务调度，然后就研究了目前市面上主流的开源分布式任务调度框架，用起来就一个感觉：麻烦!特别是之前在一个类里写了好多个调度任务，改造起来更加麻烦。

2019-11-15 10:16:27

分布式任务框架

如何设计一个优秀的分布式系统？重要因素、工具、策略都在这里

快速应用程序开发和分布式系统部署的指南，是从“慢慢来”开始的。最明智的做法就是先计划好你要去哪里，你要做什么，否则你很可能最终没能达成目标、开发预算耗尽并且毫无成果。

2019-11-14 08:44:11

分布式系统策略

聊聊分布式定时任务elastic-job作业分片策略

在实际开发种常会遇到需要定时跑批，定时每天执行一次对账操作等场景。分布式定时任务不仅解决了以上难题，还提供了分片处理提高处理效率、分布式调度协调、弹性扩容缩容、失效转移等优点。

2019-11-12 09:32:39

分布式 elastic-job 分片

分布式架构是数据中心的未来吗？

本文分析了传统集中式数据中心和分布式架构数据中心的主要区别，探索了未来数据中心架构发展的趋势。

2019-11-06 09:05:43

云计算数据中心网络安全

区块链与课堂：通过分布式分类账技术改善教育质量

金融、物流乃至法律领域，都将在区块链技术具体应用的驱动下有所改进。但在人们的关注视野之外，教育行业实际上也有望得到区块链的有力支持。

2019-11-05 15:32:02

区块链教育

Elasticsearch分布式架构原理，我们真的需要知道，很重要

Elasticsearch用于构建高可用和可扩展的系统。扩展的方式可以是购买更好的服务器(纵向扩展(vertical scale or scaling up))或者购买更多的服务器(横向扩展(horizontal scale or scaling out))。

2019-11-04 08:54:53

Elasticsear 分布式架构

详解三种主流分布式事务方案的优劣

在电商领域等互联网场景下，传统的事务在数据库性能和处理能力上都暴露出了瓶颈。柔性事务有两个特性：基本可用和柔性状态。

2019-11-04 08:38:45

分布式事务主流 TCC

阿里云通过分布式块存储国家标准认证

近日，记者了解到，存储国家标准——GB/T 37737-2019《信息技术云计算分布式块存储系统总体技术要求》测试认证已经取得阶段性成果，阿里云成为首个通过该标准测试的云厂商。

2019-10-29 14:22:44

阿里云云计算认证测试

玩了分布式这么久,你不会连Kafka都不清楚吧

Kafka 现在在企业和互联网项目中的应用越来越多了，本篇文章就从 Kafka 的基础开始带你一展 Kafka 的宏图。

2019-10-29 09:41:54

Kafka 分布式分布式

分布式技术“上位”进行时

分布式技术，作为一种专门针对海量数据场景的解决方案，就成为了一剂“特效药”。在基础“疗效”之外，更关键的是，技术本身还埋藏着交给未来的“彩蛋”。

2019-10-28 10:10:01

技术研发分布式

详解Oracle数据库分布式事务ORA-01591错误解决方法

最近在update某张表时突然提示了个比较少见的错误，ORA-01591,这个问题跟平时的锁还有点不一样，下面一起来看看吧。

2019-10-27 23:10:33

Oracle 数据库分布式事务

超详细的微服务分布式架构统一配置中心选型对比

由于目前新项目基本是微服务架构，大概有几十个项目，都是基于LCP平台研发的，而每次平台上修改配置，各个项目也都需要去修改配置，然后还要重启，况且是三套环境，维护起来特别麻烦，所以准备做一个统一的配置中心。

2019-10-24 11:17:57

架构运维技术

Gartner 2020年十大战略性技术趋势：超级自动化、分布式云、AI安全等

超级自动化、区块链、AI安全、分布式云和自主设备在加快颠覆，并为今年的战略性技术趋势创造了机会。

2019-10-23 16:30:53

Gartner 科技技术

从关系型数据库到分布式机器学习，揭秘腾讯大数据十年发展历程

大数据技术在过去10多年中极大改变了企业对数据的存储、处理和分析方式。如今，大数据技术逐渐成熟，涵盖了计算、存储、数仓、数据集成、可视化、NOSQL、OLAP分析、机器学习等丰富领域。在未来，大数据技术还会往引擎容器化、大数据机器学习、数据湖等方面不断延伸。

2019-10-21 12:09:26

腾讯大数据数据库

终于有人把“分布式事务”说清楚了！

一个复杂的系统往往都是从一个小而简的系统发展衍化而来，为了满足日益增长的业务需求，不断的增加系统的复杂度，从单体架构逐步发展为分布式架构，而分布式系统架构的设计主要关注：高性能，高可用，高拓展。

2019-10-21 08:51:41

分布式事务 CAP AP

Java 多线程爬虫及分布式爬虫架构探索

这是 Java 爬虫系列博文的第五篇，在上一篇 Java 爬虫服务器被屏蔽，不要慌，咱们换一台服务器中，我们简单的聊反爬虫策略和反反爬虫方法，主要针对的是 IP 被封及其对应办法。前面几篇文章我们把爬虫相关的基本知识都讲的差不多啦。这一篇我们来聊一聊爬虫架构相关的内容。

2019-10-16 17:07:36

Java 服务器架构

分布式及高可用元数据采集原理

元数据采集是元数据产品的核心部分，如何提升采集效率是需要仔细斟酌的事情，既要保持稳定性也要保持跟上主流技术的发展趋势。元数据产品从最初集中式WEB应用系统到现在流行的分布式、微服务这种系统架构，原有元数据采集效率已不能满足应用的需求了。

2019-10-16 10:34:33

数据库大数据脚本语言

支撑现代分布式存储系统的算法

随着应用程序处理的数据量不断增长，扩展存储变得愈发具有挑战性。每个数据库系统都有自己的方案。为了从这些方案中做出正确的选择，了解它们是至关重要的。

2019-10-15 10:59:43

分布式存储系统

区块链与分布式账本技术是一回事吗？

随着以比特币为代表的加密货币的兴起，“区块链”的概念也成了人们热衷讨论的话题。但与区块链类似的另一个概念“分布式账本技术”却没有得到同等程度的关注。

2019-10-12 10:40:32

区块链数字货币比特币

图解分布式一致性算法

今天的文章，咱们会通过图的方式，来深入学习和理解分布式一致性的实现原理。

2019-10-11 23:27:19

分布式一致性算法开发

上一页 1 ··· 10 11 12 13 14 ··· 28 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营