鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 25年5月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

分布式

1386内容

关注

涵盖分布式相关研究热点、技术难点与应用场景。

文章博文课程

共 1386 条

如何解决分布式系统可管理性问题?

分布式系统是一个由很多进程组成的整体，这个整体中每个成员部分，都会具备一些状态，比如自己的负责模块，自己的负载情况，对某些数据的掌握等等。

2016-12-09 09:21:45

分布式系统大数据

“分布式猜解”攻击可六秒钟内搞定Visa卡的安全验证

如果在电商网站输错多次某信用卡的有效期和CVV安全码，该网站将禁止使用该信用卡，以防止网络罪犯猜解信用卡。但是电商网站有很多，如果把这些网站同时利用起来猜解信用卡的凭证信息呢?结果是只需6秒钟，就可达到目的。

2016-12-07 15:54:01

分布式攻击 Visa卡

联想超融合存储：面向对象的分布式存储系统

联想超融合系统利用分片机制来解决单个服务器不能满足的大量数据存储和大吞吐量的系统读写等问题。分片是一种水平扩展方式，把一个大的数据集分散到多个服务器上，所有的服务器将组成一个逻辑上的数据库来存储这个大的数据集。

2016-12-06 20:01:00

细聊分布式ID生成方法

今天和大家聊聊分布式ID生成方法。

2016-11-29 09:12:21

数据库分布式ID

TaoCloud与红帽发布XDFS-Pro分布式文件存储

随着云计算和大数据的飞速发展，弹性、高效、持续可用已成为现代IT架构的基本要求。 TaoCloud与红帽双方携手，整合最新的云计算、软件定义数据中心相关产品和技术，共同致力于为用户提升数据中心效率，简化数据中心管理并降低数据中心成本

2016-11-22 09:48:45

运维改革探索(二)：构建可视化分布式运维手段

工欲善其事，必先利其器。上篇我们已经详细分享了监控相关的知识，然而运维可视化，除了构造可视化监控外，还要建立相应的运维手段，云化下的运维工具和传统架构的有较大不同，对集群式、分布式提出了更高的要求。

2016-11-15 13:35:16

运维可视化分布式

【专访】颜世光：百度通过分布式集群实现万亿量级计算

记者在WOT2016大数据峰会前采访了百度网页搜索基础架构团队技术负责人颜世光，他是WOT2016大数据峰会上的发言嘉宾之一，与我们共同分享了关于海量计算以及搜索引擎的最新技术。

2016-11-11 20:23:17

分布式集群万亿量级计算百度

【WOT】颜世光：百度通过分布式集群实现万亿量级计算原创

颜世光于2011年加入百度，早期从事Spider系统架构相关研发，期间主持了百度第三代Spider系统的设计与实现。当前主要研究方向为大规模分布式系统，是百度海量数据库Tera、百度文件系统BFS和集群操作系统Galaxy的主要作者。他热衷开源，先后推动了百度多个重量级系统对外开源

2016-11-08 21:18:22

实时处理大数据的分布式系统Druid-IO

Druid 是一个用于大数据实时查询和分析的高容错、高性能开源分布式系统，旨在快速处理大规模的数据，并能够实现快速查询和分析。

2016-11-08 12:49:27

大数据分布式系统 Druid-IO

分布式系统，你真的了解吗?

我们邀请腾讯互娱研发部高级工程师韩伟，分享他所理解的分布式系统。由于内容较多，将分三篇进行讲述，本期第一篇先来看看他眼中的分布式系统究竟是什么吧。

2016-11-02 12:06:27

分布式系统大数据

Gigamon推出全新产品GigaVUE-HC1，助力分布式及小型企业实现全面可视化、提升安全效能

近日，流量可视化解决方案领导厂商Gigamon 宣布推出全新GigaVUE-HC1产品，助力GigaSECURE®安全交付平台覆盖范围实现大跨度发展，从大型数据中心、小型企业一直到分布式企业的远程站点。

2016-10-27 10:42:05

一文读懂分布式系统

分布式系统是一个古老而宽泛的话题，而近几年因为 “大数据” 概念的兴起，又焕发出了新的青春与活力。除此之外，分布式系统也是一门理论模型与工程技法并重的学科内容。

2016-10-25 14:35:05

分布式系统存储

分布式、模块化的Java开发平台Castle-Platform

Castle-Platform是一个分布式、模块化的开发平台，目标是打造高性能、高扩展性的开发平台，完成通用的管理功能。采用了后台管理集中部署，会员业务系统可分离部署等特点，可独立区分后台管理系统、前端展示系统、用户中心系统。开发者可以在此基础上进行扩展，进而使用一个核心就可以开发出各种互联网产品。

2016-10-24 15:37:33

Castle-Plat Java

Oracle12c R2：利用分片技术提升分布式性能

Oracle分片功能吸取了Cassandra、MongoDB和Amazon DynamoDB这些NoSQL数据库的长处。这些数据库以及其它一些NoSQL数据库都支持分片技术，使得数据库可以水平跨多个服务器部署。

2016-10-19 09:36:04

Oracle12c R 分片分布式

如何设计一个复杂的分布式爬虫系统？

一个复杂的分布式爬虫系统由很多的模块组成，每个模块是一个独立的服务(SOA架构)，所有的服务都注册到Zookeeper来统一管理和便于线上扩展。模块之间通过thrift(或是protobuf，或是soup，或是json，等)协议来交互和通讯。

2016-09-30 10:13:07

分布式爬虫系统

分布式计算中的八大谬论，哪些已经得到有效解决译文

第一大谬论很可能导致您的设施陷入瘫痪。正如墨菲定律所言，可能发生的坏事儿一定会发生，网络正是验证这一定律的有效载体。不过，主动事务数据复制机制能够确保即使单一甚至整体数据中心下线，大家需要的信息仍然能够得到顺利交付——这是因为各数据节点能够不受地理影响而实现持续同步。

2016-09-27 11:22:28

腾讯云分布式高可靠消息队列CMQ架构最佳实践

腾讯云基础产品团队：继承腾讯内部沉淀十多年的虚拟化、计算、网络、存储等基础能力，深度开发KVM和SDN网络虚拟化等底层技术，开发高可用块存储和容器服务，为业界打造一系列高可用高性能的弹性云产品，以及覆盖互联网和传统行业的综合解决方案。

2016-09-23 10:51:23

这三种分布式存储文件系统，你造吗？

随着云计算在全球范围内的高速发展，谷歌、亚马逊等企业的崛起，特别是"互联网+"深入融合背景下的业务云化需求，传统企业在数据中心建设中被动地徘徊在传统存储阵列与分布式存储两种体系存储架构之间。

2016-09-18 22:47:57

分布式存储 GFSAFS Lustre

数据太大？你该了解Hadoop分布式文件系统

大数据时代来了。当所有人都争吵着这件事情的时候，当所有企业都看好大数据的发展前景的时候，却都很少关注这些数据从哪儿来，我们有没有足够优秀的技术能力处理这些数据。

2016-09-14 23:51:23

大数据 Hadoop

一文读懂Hadoop、HBase、Hive、Spark分布式系统架构

机器学习、数据挖掘等各种大数据处理都离不开各种开源分布式系统，hadoop用户分布式存储和map-reduce计算，spark用于分布式机器学习，hive是分布式数据库，hbase是分布式kv系统，看似互不相关的他们却都是基于相同的hdfs存储和yarn资源管理，本文通过全套部署方法来让大家深入系统内部以充分理解分布式系统架构和他们之间的关系。

2016-09-01 13:48:18

Hadoop HBase Hive

我与分布式机器学习的故事

从毕业加入Google 开始做分布式机器学习，到后来转战腾讯广告业务，至今已经七年了。我想说说我见到的故事和我自己的实践经历，如果你关注大数据，听完我说的故事，应该会有感触。

2016-08-31 07:02:51

机器学习大数据互联网

国美在线那广：分布式存储与容器技术已经成为电商首选原创

国美电器是中国大陆和香港最大的电器零售商之一。国美需要一个强大的IT系统帮其进行日常运营和支持，借以加强供应链效率并改善购物体验和客户服务。目前，国内的3C零售业已经进入了“多核心竞争”，线上、线下企业都在试图通过自身掌控的庞大资源抢占家电零售业的“流量入口”，线上企业的优势和线下传统企业的积累在每年大促来临之前碰撞得格外激烈

2016-08-28 22:02:52

百年名校律动无线华为敏捷分布式Wi-Fi方案助力南京大学实现无线全覆盖

南京大学作为国家教育部直属重点综合性大学，是国家“985工程”和“211工程”重点建设的高校，其信息化建设一直走在全国高校前列。

2016-08-16 17:28:53

探寻分布式系统中的架构学问译文

在处理分布式系统时，单纯利用容器构建服务还远远不够。我们需要考量架构方面的选择，并利用正确工具加以协助。

2016-08-12 15:17:40

专为分布式系统管理员打造的五款开源支持工具译文

远程分布式系统管理团队能够凭借着跨越全球各时区这一巨大优势保证随时可对突发状况进行解决，同时也带来了更为丰富的人才储备池供企业使用。而在具体工具方面，我们一同来看OpenStack全球基础设施团队选择的五款开源协作方案。

2016-08-01 11:16:45

开源 Etherpad Pastebin

陕西信合携手神州信息打造分布式企业服务总线项目

近年来，随着银行业务的不断发展及信息系统的不断增加，系统间的交互更加复杂与频繁;与此同时，互联网蓬勃发展，金融市场的新需求、新业务不断涌现，竞争压力催生银行转型加速，并对银行的服务理念、信息科技等提出了更高的要求。

2016-07-28 14:36:10

神州信息信息化 IT

泰尔实验室:新华三拿到首张分布式存储“门票”

前，新华三集团H3C ONEStor分布式存储系统正式通过中国泰尔实验室权威测试认证，成为全球首款在泰尔实验室通过认证的存储系统，新华三在分布式存储领域技术实力和经验积累得到了充分展现。该奖项的获得标志着在分布式存储这个新兴领域，新华三已拿到了第一张通过第三方测试机构认证的“门票”。

2016-07-21 18:02:40

国内领先的新一代分布式数据库，巨杉数据库获得1000万美元B轮融资，DCM领投

在当前的资本寒冬之下，巨杉此次B轮融资，体现了投资界对于这家务实的大数据基础软件公司发展的一致看好，而此次融资也成为国内新一代分布式数据库领域最大的一笔投融资。

2016-07-14 09:37:17

数据库 DCM 巨杉数据库

酒店无线覆盖 “神器”——华为敏捷分布式Wi-Fi方案

尼克是一家酒店的老板，拥有客房643间，最近经常有客人抱怨酒店客房的隔音效果不好，影响休息。为了给客人提供良好的休息环境，尼克对酒店进行了一次升级改造，加强了客房的隔音效果。然而升级改造后，有大量客人投诉客房的Wi-Fi体验很差，客房内信号不好，网速慢，打不开网页。对此尼克很不解，客房改造又不是网络改造，网络体验为什么会变差？

2016-07-05 17:57:33

银行业重塑竞争力分布式核心系统或打破业务瓶颈

长期以来，中国银行业发展一直以“稳健”为主。但近年，金融行业的整体发展出现了巨大变化，一方面，银行受利率市场化以及世界经济形势走低的影响，利润率逐年下滑，不良贷款额及不良贷款率持续上升;另一方面，互联网金融浪潮下的跨界竞争者纷纷进入支付、融资等金融传统领域...

2016-07-05 16:51:45

华为敏捷分布式Wi-Fi解决方案通过权威机构Tolly Group测试验证

[中国，深圳，2016年6月6日] 全球领先的信息与通信解决方案供应商华为今日宣布，其敏捷分布式Wi-Fi解决方案顺利通过了国际权威测试机构Tolly Group的测试验证。测试结果表明，在与其他业界主流厂商的室内面板和放装方案对比中，华为敏捷分布式Wi-Fi解决方案表现出卓越的性能，其易管理，零漫游，快速自组网的优势获得测试专家组的一致认可。

2016-06-06 18:30:33

华为，Tolly Gr

京东资深架构师张成远：京东分布式数据库是如何炼成的？原创

2016年4月14-15日，由51CTO传媒主办的WOT2016互联网运维与开发者大会在北京珠三角JW万豪酒店召开。秉承专注技术、服务技术人员的理念，自2012年以来，WOT品牌大会已经成功举办了八届，积累了大量的技术专家资源，获得了广大IT从业者和技术爱好者的一致认可，成为了业界重要的技术分享交流平台以及人脉拓展平台。

2016-04-20 17:18:29

分布式数据库京东 WOT

RG-RSR77系列万兆核心分布式路由器

RG-RSR77系列万兆核心分布式路由器是锐捷网络多年来坚持自主研发，高端路由再创新，重点推出的新一代基于可扩展高性能平台的多核分布式高端路由器。定位于IP骨干网、IP城域网以及各种大型IP网络的核心和汇聚位置应用的可信多业务路由器。

2016-04-09 17:46:51

传统存储阵列与分布式存储只能二选一？宏杉科技说NO！

这两种存储架构并没有绝对的优劣之分。一方面，传统存储阵列以可靠性高、稳定性好，功能丰富而著称，并在以往应用实践中得到了广泛认可。但与此同时，传统存储阵列也暴露出了横向扩展性差、价格昂贵、弹性缺乏、数据连通困难等不足，容易形成数据孤岛，导致数据中心管理和维护的成本居高不下

2016-03-25 10:12:56

彻底厘清真实世界中的分布式系统

分布式系统领域的文献虽然多，我作为一名实践者，却发现如果你不是科班出身，就不知道怎样入门或者如何综合这么多的知识。这篇文章提供了一个不是那么学术的思路，帮助你理解分布式系统的各种设计思想。

2016-01-20 17:13:13

分布式系统架构设计消息平台

分布式存储进入大规模实践阶段

回首IT的历史变迁，半个世纪可谓发生了翻天覆地的变化。上个世纪60年代是IBM大机时代，进入80年代后PC成为主流，诞生了像微软、英特尔这样的一些大公司，90年代以后特别是2000年以后移动互联网的普及，我们迈入了大数据、云计算的时代。

2016-01-12 14:59:40

分布式存储分布式存储架构

密集型小房间无线覆盖神器——华为敏捷分布式AP

随着智能手机、平板电脑、笔记本电脑的普及，WIFI需求正发生着前所未有的爆炸式增长。WiFi无线网络迅速融入当代人的主流生活, 逐渐成为人们工作、学习、生活的基本需求之一。

2016-01-12 14:51:30

华为敏捷分布式AP

Apache Eagle：eBay开源分布式实时Hadoop数据安全引擎

Apache Eagle提供一套高效分布式的流式策略引擎，具有高实时、可伸缩、易扩展、交互友好等特点，同时集成机器学习对历史模型训练建立用户画像以实现智能实时地保护Hadoop生态系统中大数据的安全。

2016-01-06 10:22:18

开源 eBay Hadoop

联方云天曾旭东：分布式电源系统的深耕者

中国IDC产业年度大典作为国内云计算和数据中心领域规模最大、最具影响力的标志性盛会，已成功举办九届，如今第十届中国IDC产业年度大典(IDCC2015)也将于2016年1月5日-7日在北京国家会议中心隆重召开，预计本届大会参会人数和规模将达到8000+人次。

2015-12-25 14:43:36

IDC 年度评选

GemFire——12306背后的分布式内存对象缓存系统

我们通过把对象或数据缓存在内存中，减少对传统关系型数据库的读写次数(减少IO瓶颈)，从而使我们的应用支持更多的TPS，更多的并发用户数。GemFire能够在部分场景下对关系型数据库起到很好的补充(甚至替代)作用，它可以作为应用层与传统数据层的“润滑剂”。

2015-12-14 17:35:21

GemFire 12306 分布式

华为发布创新敏捷分布式Wi-Fi解决方案

2015年12月14日，华为发布了创新的敏捷分布式Wi-Fi解决方案，该方案在传统AC+Fit AP的基础上，将Fit AP一分为二，形成AC+中心AP+远端射频单元的三级分布式架构，通过分布式覆盖解决酒店或宿舍的多房间信号覆盖问题和大量AP带来的管理问题。

2015-12-14 15:58:13

微软亚洲研究院开源分布式机器学习工具包

为了满足研究人员和开发者日益增长的各种需求，微软亚洲研究院于日前将分布式机器学习工具包(DMTK）通过GitHub开源。DMTK由一个服务于分布式机器学习的框架和一组分布式机器学习算法构成，是一个将机器学习算法应用在大数据上的强大工具包。

2015-11-11 14:01:26

微软开源分布式

那些分布式系统设计常用的开源模块

分布式系统是个由多个互相连接的处理资源组成的计算机系统，它们在整个系统的控制下协同执行同一个任务，最少依赖于集中的程序、数据或硬件。本文对大家常用的分布式系统设计开源模块进行了总结，包括HBase、Nginx、Zookeeper。

2015-11-10 17:45:00

分布式系统设计开源模块

为什么大部分NoSQL不提供分布式事务？

NoSQL数据库不提供事务机制原因在于其分布式特点，一系列写操作中访问的数据可能位于不同的分区服务器，这样的事务就变成分布式事务，在分布式事务中实现原子性需要彼此协调，而协调是耗费时间的，每台机器在一个大事务过程中必须依次确认，这就需要一种协议确保一个事务中没有任何一台机器写操作失败。这种协调是昂贵的。

2015-11-05 17:41:25

NoSQL 分布式事务事务架构

C#分布式消息队列 EQueue 2.0 发布啦

最近花了我几个月的业余时间，对EQueue做了一个重大的改造，消息持久化采用本地写文件的方式。到现在为止，总算完成了，所以第一时间写文章分享给大家这段时间我所积累的一些成果。

2015-11-02 16:38:09

C#分布式消息队列

分布式存储 HDFS 与 GFS 的设计差异

我们知道 HDFS 最早是根据 GFS(Google File System)的论文概念模型来设计实现的。HDFS 参照了它所以大部分架构设计概念是类似的，比如 HDFS NameNode 相当于 GFS Master，HDFS DataNode 相当于 GFS chunkserver。

2015-10-19 11:41:30

分布式存储 HDFS GFS

系统分布式情况下最终一致性方案梳理

目前的应用系统，不管是企业级应用还是互联网应用，最终数据的一致性是每个应用系统都要面临的问题，随着分布式的逐渐普及，数据一致性更加艰难，但是也很难有银弹的解决方案，也并不是引入特定的中间件或者特定的开源框架能够解决的，更多的还是看业务场景，根据场景来给出解决方案。

2015-10-19 10:42:37

分布式一致性应用系统

IPFS：替代HTTP的分布式网络协议

近日，IFPS宣布了一个未来web发展计划，它用基于内容的地址替代基于域名的地址，也就是用户寻找的不是某个地址而是储存在某个地方的内容，不需要验证发送者的身份，而只需要验证内容的哈希，通过这样可以让网页的速度更快、更安全、更健壮、更持久。IPFS表示，IPFS未来将替代HTTP(以及其他的许多东西)。

2015-10-19 09:52:11

IPFS HTTP 分布式网络协议

如何实现 Docker 与分布式数据库结合

随着如今开源软件以及开源项目的热潮，Docker作为如今在技术圈非常火爆的一款开源软件产品，除了开源项目的贡献非常活跃，目前应用也十分的广泛，包括Redhat在内的多个操作系统都已经能支持Docker，而更是无数的软件已经在使用Docker镜像进行安装部署。

2015-10-16 18:03:25

Docker 分布式 CoreOS

Storm、Spark和MapReduce 开源分布式计算系统框架比较

比较项 Storm Spark Streaming 分布式计算在许多领域都有广泛需求，目前流行的分布式计算框架主要有 Hadoop MapReduce, Spark Streaming, Storm；这三个框架各有优势，现在都属于 Apache 基金会下的顶级项目，下文将对三个框架的特点与适用场景进行分析，以便开发者能快速选择适合自己的框架进行开发。

2015-10-15 14:05:51

Storm Spark MapReduce

上一页 1 ··· 19 20 21 22 23 ··· 28 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营