51CTO首页
AI.x社区
博客
学堂
精品班
直播训练营
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

分布式

1344内容  
涵盖分布式相关研究热点、技术难点与应用场景。
文章 博文课程
共 1344 条
英特尔开源分布式深度学习库BigDL：支持高性能大数据分析
近日，英特尔开源了一个运行在 Apache Spark 上的分布式深度学习库 BigDL，其可以利用已有的 Spark 集群来运行深度学习计算，并且还能简化从 Hadoop 的大数据集的数据加载。

2017-01-19 11:36:28

英特尔大数据分析BigDL
华为分布式云数据中心助力电力行业升起“电力云”
各大电力公司都在努力建设全面高效的电网企业经营管理信息化系统，研究部署云计算。为此国家电网提出了“电力云”的概念。

2017-01-18 15:26:09

华为
京东分布式服务跟踪系统-CallGraph
CallGraph根据Google为其基于日志的分布式跟踪系统Dapper发表的论文，由京东商城基础平台部自主研发，目前已经上线。

2017-01-16 14:51:26

京东分布式服务CallGraph
分布式锁的多种实现方式
分布式的CAP理论告诉我们“任何一个分布式系统都无法同时满足一致性(Consistency)、可用性(Availability)和分区容错性(Partition tolerance)，最多只能同时满足两项。

2017-01-16 14:13:37

分布式锁数据库
京东分布式存储建设之路
对象存储的元数据管理是一个业内难题。虽然对象存储并无目录的概念，但要支持按前缀进行List操作，即能通过Prefix和Delimiter的结合，实现层次查询。在数据量不大时，类似于Hdfs的NameNode将全部用户Key都存在内存中就能满足需求，但当对象的数量过亿或者十亿时，将会耗尽内存，无法做到横向扩展。很多KV存储能做到随意横向扩展，但不能很好的支持对象存储List请求。

2017-01-10 16:18:26

分布式存储建设
为什么说传统分布式事务不再适用于微服务架构?
微服务架构该如何保证数据一致性呢?本文就来谈谈这个话题。

2017-01-06 15:27:51

传统分布式微服务架构数据一致性
一分钟实现分布式锁
分布式环境下，多台机器上多个进程对一个数据进行操作，如果不做互斥，就有可能出现“余额扣成负数”，或者“商品超卖”的情况，如何实现简易分布式锁，对分布式环境下的临界资源做互斥，是今天将要讨论的话题。

2016-12-16 11:05:00

分布式互斥线程
华为分布式存储助力国泰君安建设PB级弹性资源池

2016-12-14 13:36:02

华为存储
如何解决分布式系统可管理性问题?
分布式系统是一个由很多进程组成的整体，这个整体中每个成员部分，都会具备一些状态，比如自己的负责模块，自己的负载情况，对某些数据的掌握等等。

2016-12-09 09:21:45

分布式系统大数据
“分布式猜解”攻击可六秒钟内搞定Visa卡的安全验证
如果在电商网站输错多次某信用卡的有效期和CVV安全码，该网站将禁止使用该信用卡，以防止网络罪犯猜解信用卡。但是电商网站有很多，如果把这些网站同时利用起来猜解信用卡的凭证信息呢?结果是只需6秒钟，就可达到目的。

2016-12-07 15:54:01

分布式攻击Visa卡
联想超融合存储：面向对象的分布式存储系统
联想超融合系统利用分片机制来解决单个服务器不能满足的大量数据存储和大吞吐量的系统读写等问题。分片是一种水平扩展方式，把一个大的数据集分散到多个服务器上，所有的服务器将组成一个逻辑上的数据库来存储这个大的数据集。

2016-12-06 20:01:00

超融合
细聊分布式ID生成方法
今天和大家聊聊分布式ID生成方法。

2016-11-29 09:12:21

数据库分布式ID
TaoCloud与红帽发布XDFS-Pro分布式文件存储
随着云计算和大数据的飞速发展，弹性、高效、持续可用已成为现代IT架构的基本要求。 TaoCloud与红帽双方携手，整合最新的云计算、软件定义数据中心相关产品和技术，共同致力于为用户提升数据中心效率，简化数据中心管理并降低数据中心成本

2016-11-22 09:48:45

TaoCloud
运维改革探索(二)：构建可视化分布式运维手段
工欲善其事，必先利其器。上篇我们已经详细分享了监控相关的知识，然而运维可视化，除了构造可视化监控外，还要建立相应的运维手段，云化下的运维工具和传统架构的有较大不同，对集群式、分布式提出了更高的要求。

2016-11-15 13:35:16

运维可视化分布式
【专访】颜世光：百度通过分布式集群实现万亿量级计算
记者在WOT2016大数据峰会前采访了百度网页搜索基础架构团队技术负责人颜世光，他是WOT2016大数据峰会上的发言嘉宾之一，与我们共同分享了关于海量计算以及搜索引擎的最新技术。

2016-11-11 20:23:17

分布式集群万亿量级计算百度
【WOT】颜世光：百度通过分布式集群实现万亿量级计算 原创
颜世光于2011年加入百度，早期从事Spider系统架构相关研发，期间主持了百度第三代Spider系统的设计与实现。当前主要研究方向为大规模分布式系统，是百度海量数据库Tera、百度文件系统BFS和集群操作系统Galaxy的主要作者。他热衷开源，先后推动了百度多个重量级系统对外开源

2016-11-08 21:18:22

百度
实时处理大数据的分布式系统Druid-IO
Druid 是一个用于大数据实时查询和分析的高容错、高性能开源分布式系统，旨在快速处理大规模的数据，并能够实现快速查询和分析。

2016-11-08 12:49:27

大数据分布式系统Druid-IO
分布式系统，你真的了解吗?
我们邀请腾讯互娱研发部高级工程师韩伟，分享他所理解的分布式系统。由于内容较多，将分三篇进行讲述，本期第一篇先来看看他眼中的分布式系统究竟是什么吧。

2016-11-02 12:06:27

分布式系统大数据
Gigamon推出全新产品GigaVUE-HC1，助力分布式及小型企业实现全面可视化、提升安全效能
近日，流量可视化解决方案领导厂商Gigamon 宣布推出全新GigaVUE-HC1产品，助力GigaSECURE®安全交付平台覆盖范围实现大跨度发展，从大型数据中心、小型企业一直到分布式企业的远程站点。

2016-10-27 10:42:05

Gigamon
一文读懂分布式系统
分布式系统是一个古老而宽泛的话题，而近几年因为 “大数据” 概念的兴起，又焕发出了新的青春与活力。除此之外，分布式系统也是一门理论模型与工程技法并重的学科内容。

2016-10-25 14:35:05

分布式系统 存储
分布式、模块化的Java开发平台Castle-Platform
Castle-Platform是一个分布式、模块化的开发平台，目标是打造高性能、高扩展性的开发平台，完成通用的管理功能。采用了后台管理集中部署，会员业务系统可分离部署等特点，可独立区分后台管理系统、前端展示系统、用户中心系统。开发者可以在此基础上进行扩展，进而使用一个核心就可以开发出各种互联网产品。

2016-10-24 15:37:33

Castle-PlatJava
Oracle12c R2：利用分片技术提升分布式性能
Oracle分片功能吸取了Cassandra、MongoDB和Amazon DynamoDB这些NoSQL数据库的长处。这些数据库以及其它一些NoSQL数据库都支持分片技术，使得数据库可以水平跨多个服务器部署。

2016-10-19 09:36:04

Oracle12c R分片分布式
如何设计一个复杂的分布式爬虫系统？
一个复杂的分布式爬虫系统由很多的模块组成，每个模块是一个独立的服务(SOA架构)，所有的服务都注册到Zookeeper来统一管理和便于线上扩展。模块之间通过thrift(或是protobuf，或是soup，或是json，等)协议来交互和通讯。

2016-09-30 10:13:07

分布式爬虫系统
分布式计算中的八大谬论，哪些已经得到有效解决 译文
第一大谬论很可能导致您的设施陷入瘫痪。正如墨菲定律所言，可能发生的坏事儿一定会发生，网络正是验证这一定律的有效载体。不过，主动事务数据复制机制能够确保即使单一甚至整体数据中心下线，大家需要的信息仍然能够得到顺利交付——这是因为各数据节点能够不受地理影响而实现持续同步。

2016-09-27 11:22:28

云计算
腾讯云分布式高可靠消息队列CMQ架构最佳实践
腾讯云基础产品团队：继承腾讯内部沉淀十多年的虚拟化、计算、网络、存储等基础能力，深度开发KVM和SDN网络虚拟化等底层技术，开发高可用块存储和容器服务，为业界打造一系列高可用高性能的弹性云产品，以及覆盖互联网和传统行业的综合解决方案。

2016-09-23 10:51:23

腾讯云
这三种分布式存储文件系统，你造吗？
随着云计算在全球范围内的高速发展，谷歌、亚马逊等企业的崛起，特别是"互联网+"深入融合背景下的业务云化需求，传统企业在数据中心建设中被动地徘徊在传统存储阵列与分布式存储两种体系存储架构之间。

2016-09-18 22:47:57

分布式存储GFSAFSLustre
数据太大？你该了解Hadoop分布式文件系统
大数据时代来了。当所有人都争吵着这件事情的时候，当所有企业都看好大数据的发展前景的时候，却都很少关注这些数据从哪儿来，我们有没有足够优秀的技术能力处理这些数据。

2016-09-14 23:51:23

大数据Hadoop
一文读懂Hadoop、HBase、Hive、Spark分布式系统架构
机器学习、数据挖掘等各种大数据处理都离不开各种开源分布式系统，hadoop用户分布式存储和map-reduce计算，spark用于分布式机器学习，hive是分布式数据库，hbase是分布式kv系统，看似互不相关的他们却都是基于相同的hdfs存储和yarn资源管理，本文通过全套部署方法来让大家深入系统内部以充分理解分布式系统架构和他们之间的关系。

2016-09-01 13:48:18

HadoopHBaseHive
我与分布式机器学习的故事
从毕业加入Google 开始做分布式机器学习，到后来转战腾讯广告业务，至今已经七年了。我想说说我见到的故事和我自己的实践经历，如果你关注大数据，听完我说的故事，应该会有感触。

2016-08-31 07:02:51

机器学习大数据互联网
国美在线那广：分布式存储与容器技术已经成为电商首选 原创
国美电器是中国大陆和香港最大的电器零售商之一。国美需要一个强大的IT系统帮其进行日常运营和支持，借以加强供应链效率并改善购物体验和客户服务。目前，国内的3C零售业已经进入了“多核心竞争”，线上、线下企业都在试图通过自身掌控的庞大资源抢占家电零售业的“流量入口”，线上企业的优势和线下传统企业的积累在每年大促来临之前碰撞得格外激烈

2016-08-28 22:02:52

国美
百年名校 律动无线 华为敏捷分布式Wi-Fi方案助力南京大学实现无线全覆盖
南京大学作为国家教育部直属重点综合性大学，是国家“985工程”和“211工程”重点建设的高校，其信息化建设一直走在全国高校前列。

2016-08-16 17:28:53

华为
探寻分布式系统中的架构学问 译文
在处理分布式系统时，单纯利用容器构建服务还远远不够。我们需要考量架构方面的选择，并利用正确工具加以协助。

2016-08-12 15:17:40

分布式
专为分布式系统管理员打造的五款开源支持工具 译文
远程分布式系统管理团队能够凭借着跨越全球各时区这一巨大优势保证随时可对突发状况进行解决，同时也带来了更为丰富的人才储备池供企业使用。而在具体工具方面，我们一同来看OpenStack全球基础设施团队选择的五款开源协作方案。

2016-08-01 11:16:45

开源EtherpadPastebin
陕西信合携手神州信息打造分布式企业服务总线项目
近年来，随着银行业务的不断发展及信息系统的不断增加，系统间的交互更加复杂与频繁;与此同时，互联网蓬勃发展，金融市场的新需求、新业务不断涌现，竞争压力催生银行转型加速，并对银行的服务理念、信息科技等提出了更高的要求。

2016-07-28 14:36:10

神州信息信息化IT
泰尔实验室:新华三拿到首张分布式存储“门票”
前，新华三集团H3C ONEStor分布式存储系统正式通过中国泰尔实验室权威测试认证，成为全球首款在泰尔实验室通过认证的存储系统，新华三在分布式存储领域技术实力和经验积累得到了充分展现。该奖项的获得标志着在分布式存储这个新兴领域，新华三已拿到了第一张通过第三方测试机构认证的“门票”。

2016-07-21 18:02:40

新华三
国内领先的新一代分布式数据库，巨杉数据库获得1000万美元B轮融资，DCM领投
在当前的资本寒冬之下，巨杉此次B轮融资，体现了投资界对于这家务实的大数据基础软件公司发展的一致看好，而此次融资也成为国内新一代分布式数据库领域最大的一笔投融资。

2016-07-14 09:37:17

数据库DCM巨杉数据库
酒店无线覆盖 “神器”——华为敏捷分布式Wi-Fi方案
尼克是一家酒店的老板，拥有客房643间，最近经常有客人抱怨酒店客房的隔音效果不好，影响休息。为了给客人提供良好的休息环境，尼克对酒店进行了一次升级改造，加强了客房的隔音效果。然而升级改造后，有大量客人投诉客房的Wi-Fi体验很差，客房内信号不好，网速慢，打不开网页。对此尼克很不解，客房改造又不是网络改造，网络体验为什么会变差？

2016-07-05 17:57:33

华为
银行业重塑竞争力 分布式核心系统或打破业务瓶颈
长期以来，中国银行业发展一直以“稳健”为主。但近年，金融行业的整体发展出现了巨大变化，一方面，银行受利率市场化以及世界经济形势走低的影响，利润率逐年下滑，不良贷款额及不良贷款率持续上升;另一方面，互联网金融浪潮下的跨界竞争者纷纷进入支付、融资等金融传统领域...

2016-07-05 16:51:45

分布系统
华为敏捷分布式Wi-Fi解决方案通过权威机构Tolly Group测试验证
[中国，深圳，2016年6月6日] 全球领先的信息与通信解决方案供应商华为今日宣布，其敏捷分布式Wi-Fi解决方案顺利通过了国际权威测试机构Tolly Group的测试验证。测试结果表明，在与其他业界主流厂商的室内面板和放装方案对比中，华为敏捷分布式Wi-Fi解决方案表现出卓越的性能，其易管理，零漫游，快速自组网的优势获得测试专家组的一致认可。

2016-06-06 18:30:33

华为，Tolly Gr
京东资深架构师张成远：京东分布式数据库是如何炼成的？ 原创
2016年4月14-15日，由51CTO传媒主办的WOT2016互联网运维与开发者大会在北京珠三角JW万豪酒店召开。秉承专注技术、服务技术 人员的理念，自2012年以来，WOT品牌大会已经成功举办了八届，积累了大量的技术专家资源，获得了广大IT从业者和技术爱好者的一致认可，成为了业界重要的技术分享交流平台以及人脉拓展平台。

2016-04-20 17:18:29

分布式数据库京东WOT
RG-RSR77系列万兆核心分布式路由器
RG-RSR77系列万兆核心分布式路由器是锐捷网络多年来坚持自主研发，高端路由再创新，重点推出的新一代基于可扩展高性能平台的多核分布式高端路由器。定位于IP骨干网、IP城域网以及各种大型IP网络的核心和汇聚位置应用的可信多业务路由器。

2016-04-09 17:46:51

路由器
传统存储阵列与分布式存储只能二选一？ 宏杉科技说NO！
这两种存储架构并没有绝对的优劣之分。一方面，传统存储阵列以可靠性高、稳定性好，功能丰富而著称，并在以往应用实践中得到了广泛认可。但与此同时，传统存储阵列也暴露出了横向扩展性差、价格昂贵、弹性缺乏、数据连通困难等不足，容易形成数据孤岛，导致数据中心管理和维护的成本居高不下

2016-03-25 10:12:56

宏杉
彻底厘清真实世界中的分布式系统
分布式系统领域的文献虽然多，我作为一名实践者，却发现如果你不是科班出身，就不知道怎样入门或者如何综合这么多的知识。这篇文章提供了一个不是那么学术的思路，帮助你理解分布式系统的各种设计思想。

2016-01-20 17:13:13

分布式系统架构设计消息平台
分布式存储进入大规模实践阶段
回首IT的历史变迁，半个世纪可谓发生了翻天覆地的变化。上个世纪60年代是IBM大机时代，进入80年代后PC成为主流，诞生了像微软、英特尔这样的一些大公司，90年代以后特别是2000年以后移动互联网的普及，我们迈入了大数据、云计算的时代。

2016-01-12 14:59:40

分布式存储分布式存储架构
密集型小房间无线覆盖神器——华为敏捷分布式AP
随着智能手机、平板电脑、笔记本电脑的普及，WIFI需求正发生着前所未有的爆炸式增长。WiFi无线网络迅速融入当代人的主流生活, 逐渐成为人们工作、学习、生活的基本需求之一。

2016-01-12 14:51:30

华为敏捷分布式AP
Apache Eagle：eBay开源分布式实时Hadoop数据安全引擎
Apache Eagle提供一套高效分布式的流式策略引擎，具有高实时、可伸缩、易扩展、交互友好等特点，同时集成机器学习对历史模型训练建立用户画像以实现智能实时地保护Hadoop生态系统中大数据的安全。

2016-01-06 10:22:18

开源eBayHadoop
联方云天曾旭东：分布式电源系统的深耕者
中国IDC产业年度大典作为国内云计算和数据中心领域规模最大、最具影响力的标志性盛会，已成功举办九届，如今第十届中国IDC产业年度大典(IDCC2015)也将于2016年1月5日-7日在北京国家会议中心隆重召开，预计本届大会参会人数和规模将达到8000+人次。

2015-12-25 14:43:36

IDC年度评选
GemFire——12306背后的分布式内存对象缓存系统
我们通过把对象或数据缓存在内存中，减少对传统关系型数据库的读写次数(减少IO瓶颈)，从而使我们的应用支持更多的TPS，更多的并发用户数。GemFire能够在部分场景下对关系型数据库起到很好的补充(甚至替代)作用，它可以作为应用层与传统数据层的“润滑剂”。

2015-12-14 17:35:21

GemFire12306分布式
华为发布创新敏捷分布式Wi-Fi解决方案
2015年12月14日，华为发布了创新的敏捷分布式Wi-Fi解决方案，该方案在传统AC+Fit AP的基础上，将Fit AP一分为二，形成AC+中心AP+远端射频单元的三级分布式架构，通过分布式覆盖解决酒店或宿舍的多房间信号覆盖问题和大量AP带来的管理问题。

2015-12-14 15:58:13

Wi-Fi华为
微软亚洲研究院开源分布式机器学习工具包
为了满足研究人员和开发者日益增长的各种需求，微软亚洲研究院于日前将分布式机器学习工具包(DMTK）通过GitHub开源。DMTK由一个服务于分布式机器学习的框架和一组分布式机器学习算法构成，是一个将机器学习算法应用在大数据上的强大工具包。

2015-11-11 14:01:26

微软开源分布式
上一页 1 ··· 1819202122 ··· 27
点赞

51CTO技术栈公众号

业务
速览
在线客服