51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
信创认证
公众号矩阵
移动端
视频课免费课排行榜短视频直播课软考学堂
全部课程软考信创认证华为认证厂商认证IT技术PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9331内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9331 条
分享 ：用五个趣味案例教你数据分析的基本思想
今天和大家分享一下数据分析的一些基本思想，我给它起了个名字叫做用数据说话。内容都是个人的一些心得，比较肤浅!如有不足之处，希望大家谅解!废话不说了，现在咱正式开始。

2016-12-16 12:27:23

数据分析大数据
银行业大数据分析：如何用大数据技术优化ATM运营
银行每年都需要巨大投入来维持各项业务的运营，如何有效提高银行运营效率，降低运营成本一直是银行追求的一个重要目标。当前银行很多业务运营还是靠具体负责人凭经验及直觉“拍脑袋”做决策，通过大数据分析可以从数据中发现运营规律，为运营优化提供决策基础。本文将以大数据技术优化ATM运营的几个应用为例来说明大数据如何优化运营效率，降低运营成本。

2016-12-16 12:20:52

银行业大数据ATM
用VR做数据可视化的正确姿势是什么？
数据可视化是少数几个 VR“布道者”非常喜欢说道的利用虚拟现实可能产生变革的领域之一。但是究竟应该如何做呢?现今的数据可视化领域又有什么问题呢?本文对传统的数据可视化的几个具体问题进行挖掘，讨论理解抽象信息方面的难题，并探讨VR如何改变这一切。

2016-12-16 12:13:11

VR数据可视化
数据分析，或许不是为了分析，而是为了规范
一个行业做的越久，问题就越多，之前并不在意的问题也会拿出来思考。“数据解决企业什么问题?”这问题一定难不倒大家，甚至张口即答，例如通过数据可以对自身的企业情况有着准确和科学的把握，避免老板拍脑袋;数据可以实现对市场环境快速的反应和决策;数据可以区分客户个性化需求，提高服务价值等等。

2016-12-16 12:06:09

数据分析大数据
IDC公布2017年亚太地区数据中心10大预测
IDC亚太区分享了2017年及更长一段时间内将会给企业机构带来最大影响的数据中心预测。

2016-12-16 12:01:30

IDC数据中心
案例研究：在大型金融组织选择大数据和数据科学技术
数据科学正快速成为各行各业开发人员和管理人员的关键技能，同时它似乎也非常有趣。但它也相当复杂——有太多的工程分析技术，你很难知道自己做得是否正确或者哪里存在陷阱。在该系列文章中，我们将探讨如何利用数据科学——从已经采用并成功实施数据科学的人们那里，了解数据科学的适用场景，以及如何让它成为你的资产。

2016-12-16 11:56:56

大数据数据科学
企业数据存储厂商点将台 译文
在本文介绍的企业数据存储厂商中，我把范围限制在本地外部数据存储这一类。大多数系统支持云，可能是闪存或磁盘。我忽略的存储领域包括超融合、网关及相关技术和云超大规模存储提供商。虽然我把本文的盘点范围限制在外部存储系统，但这些都是属于后起之秀的存储领域，完全值得一提。

2016-12-16 10:15:15

数据存储
国企数据转型的正确路径：从“信息孤岛”走向“国家大数据中心”
数据作为国家基础性战略资源，已随着信息技术的日新月异渗透到各行各业，不断拉动着技术进步与产业发展。

2016-12-16 10:02:27

国企数据信息孤岛大数据
携程大数据实时风控的架构及实践
目前携程利用自主研发的风控系统有效识别、防范这些风险。携程风控系统从零起步，经过五年的不断探索与创新，已经可以有效覆盖事前、事中、事后各个环节。也从原来基于“简单规则+DB”，发展到目前能够支撑10X交易增长的智能化风控系统，基于规则引擎、实时模型计算、流式处理、M/R、大数据、数据挖掘、机器学习等的风控系统，拥有实时、准实时的风险决策、数据分析能力。

2016-12-15 21:41:15

大数据
详解：大数据分析的学习之路
以大数据分析师为目标，从数据分析基础、JAVA语言入门和linux操作系统入门知识学起，系统介绍Hadoop、HDFS、MapReduce和Hbase等理论知识和hadoop的生态环境。

2016-12-15 21:15:58

大数据
京东12G用户数据泄露背后，是光着屁股上网的你！
黑客们拿到数据第一时间就是把账号全登一遍，有余额的都转走，有优惠券的都通过一些方式变现(用优惠券购买物品后低价卖给分销商)。把用户京东上的东西都洗过一遍之后，就会拿着这些数据去洗用户其他网站账户，因为为了便于记忆，大多数人的用户名和密码都是各个网站通用的。。。

2016-12-15 21:12:28

大数据
深度学习框架Caffe源码解析
以上为Caffe代码架构的一个总体介绍，希望能借此帮助社区的小伙伴找到打开定制化Caffe大门的钥匙。本文作者希望借此抛砖引玉，与更多期望了解Caffe和深度学习框架底层实现的同行交流。

2016-12-15 09:44:31

框架Caffe源码
大数据失败案例提醒：8个不能犯的错误
为防止大数据项目遭遇失败，引入迭代机制是非常必要的。使用灵活而开放的数据基础设施,保证其允许企业员工不断调整实际方案、直到他们的努力获得理想的回馈，最终以迭代为武器顺利迈向大数据有效使用的胜利彼岸。

2016-12-15 09:39:05

大数据错误案例
Spark SQL架构分析
Spark SQL的查询优化是Catalyst，其基于Scala语言开发，可以灵活利用Scala原生的语言特性方便地扩展功能，奠定了Spark SQL的发展空间。

2016-12-14 19:20:07

Spark SQL架构分布式
Spark SQL优化策略
查询优化是传统数据库中最为重要的一环，这项技术在传统数据库中已经很成熟。除了查询优化，Spark SQL在存储上也进行了优化。下面介绍Spark SQL的一些优化策略。

2016-12-14 19:04:16

Spark SQL优化
用大数据失败案例的血泪教训来诉说8个不能犯的错误
为防止大数据项目遭遇失败，引入迭代机制是非常必要的。使用灵活而开放的数据基础设施,保证其允许企业员工不断调整实际方案、直到他们的努力获得理想的回馈，最终以迭代为武器顺利迈向大数据有效使用的胜利彼岸。

2016-12-14 13:30:00

大数据应用场景错误
大数据视角的内容产业供给侧结构性改革思考
在通往未来的道路上，新闻出版人要持续大胆探索，不断总结经验，以数据引领产业创新发展，加快构建新闻出版大数据体系，为行业的自身发展提供支持，为国民经济各领域产业部门提供从资讯、文献到知识的全面数据服务，为社会公众承担起传承文明、传播文化的神圣使命，为实现中华民族伟大复兴的中国梦贡献力量。

2016-12-14 13:23:02

大数据产业改革
数据的价值是提升业务而不仅仅是用户画像
运营商数据、航旅数据、银联数据、电商数据、物流数据等数据源已经形成数据热点。企业疯狂地追寻外部数据源，引入外部数据成了大数据战略一个重点，外部数据成为企业数据应用的主题，客户画像成为数据应用的主要议题。

2016-12-14 13:13:21

数据业务画像
如何制定数据中心冗余计划？
如果想要确保虚拟基础架构的高可用性，无疑需要冗余技术，下面我们的专家顾问将会介绍企业应该如何选择最适合自己的冗余等级。

2016-12-14 12:05:18

数据中心冗余技术
为什么说Storm比Hadoop快？
storm的网络直传、内存计算，其时延必然比hadoop的通过hdfs传输低得多;当计算模型比较适合流式时，storm的流式处理，省去了批处理的收集数据的时间;因为storm是服务型的作业，也省去了作业调度的时延。所以从时延上来看，storm要快于hadoop。

2016-12-14 12:02:01

StormHadoop大数据
阿里超大规模Docker化之路
12月6-7日，由阿里巴巴集团、阿里巴巴技术发展部、阿里云云栖社区联合主办，以“2016双11技术创新”为主题的阿里巴巴技术论坛上，阿里巴巴研究员林昊分享了阿里超大规模Docker化之路。阿里在Docker化这条路上，碰到了规模、多元化场景所带来的各种挑战，这次分享中将给大家介绍阿里为什么要引入Docker，以及如何完成这次超大规模的Docker化。

2016-12-14 11:44:25

阿里Docker大数据
机器数据分析就地安全监视
提高网络物理安全和增加安全系统的努力已形成一个不断发展的行业，该行业致力于超越这一挑战。闭路电视模拟摄像机正快速被更高清晰度、功能丰富的数字摄像机所取代，以便实现基于图像的安全系统。相比之下，数字摄像机更灵活、更智能，能够与云服务和数据分析更紧密地集成在一起。本文将介绍就地安全监视，它与基于云的数据分析相结合，使得在没有电源或网络基础架构的区域快速部署监视成为了可能。

2016-12-14 11:39:19

数据分析大数据多光谱
为大数据正名：人即数据，大数据就是我们自己
2012年，沃尔玛每小时就能产生2.5PB、100多万名用户的消费记录。同年，Facebook报道称他们每天要处理25亿个内容碎片(链接、评论)、27亿个赞和3亿次图片下载。与此同时，对颗粒数据的收集也迎来了前所未有的机遇。今年二月，基于对用户数据分析，Facebook新推出了六组多样化的表情(emoji)按钮，丰富了用户交流回复时感情流露的深度和广度。

2016-12-13 22:04:01

大数据
为什么数据挖掘很难成功？
为什么数据挖掘的数据准备工作要这么长时间，可以理解成取数时间很长、转换成所需的数据形式和格式时间很长，毕竟只有这样做，才能喂给数据挖掘引擎处理。

2016-12-13 19:47:31

大数据
大数据项目遭遇失败的八个理由
大数据目前已经成为万众瞩目的焦点，已经有众多企业在拼命把自己的数据投付使用、希望借此为重要决策提供支持。尽管大数据宣传与炒作可谓如火如荼，但仍有92%的企业始终保持中立态度，即计划在“合适的时间”着手实施或者表示不打算接触大数据项目。而在那些已经亲身实践大数据项目的企业中，多数遭遇失败、而且往往是掉进了同样的几个陷阱当中。

2016-12-13 19:40:00

大数据
大数据，大创收！
在Newzoo发布的2015年全球游戏市场报告中，其研究员们估计游戏市场的价值由2014年的836亿美元增至2015年的915亿美元。Newzoo预测，“按照此速度，全球营收在2017年将达到1,070亿美元。”在电子游戏产业发展愈发规模下，我们又该如何发掘数据背后的潜力呢？

2016-12-13 19:30:31

大数据
Hadoop问题集
今天讲一讲关于Hadoop的问题、原因以及解决方法。

2016-12-13 16:36:15

Hadoopwindows
Apache Hadoop 3.0.0-alpha1主要改进
今天主要给大家介绍Apache Hadoop 3.0.0-alpha1主要改进。

2016-12-13 16:11:44

Java Hadoop
提高数据中心效率、可用性和容量的五项最佳实践方案
今天本文主要介绍，企业数据中心设计的五项最佳实践方案。

2016-12-13 12:15:20

数据中心大数据
数据中心网络安全技术发展趋势谈
数据中心如果没有海量的数据处理，那就等着关门大吉吧，所以数据中心正在积极想尽各种办法，减少安全故障的发生，确保数据中心内部数据信息的安全，各种安全新技术一时间扑面而来。那么，未来的网络安全技术如何发展和演进，本文将和大家一起探索。

2016-12-13 12:11:37

数据中心网络安全大数据
大数据处理系统关键层次架构
在数据存储层，还有很多类似的系统和某些系统的变种，本篇仅仅列出较为出名的几个。如漏掉某些重要系统，还请谅解。

2016-12-13 11:56:09

大数据Hadoop计算框架
不平衡数据的数据处理方法
在机器学习中，不平衡数据是常见场景。不平衡数据一般指正样本数量远远小于负样本数量。如果数据不平衡，那么分类器总是预测比例较大的类别，就能使得准确率达到很高的水平。比如正样本的比例为 1%，负样本的比例为 99%。这时候分类器不需要经过训练，直接预测所有样本为负样本，准确率能够达到 99%。经过训练的分类器反而可能没有办法达到99%。

2016-12-13 11:48:05

数据处理不平衡数据
大数据时代：信息安全问题该如何解决？
对海量数据的分析挖掘能创造巨大的物质财富和社会价值。然而，数据的大量聚集导致隐私泄露无处不在，个人、企业的信息安全面临严重威胁，亟待通过完善法律法规等方式予以解决。

2016-12-13 11:34:10

大数据信息安全
大数据需要什么样的合作伙伴?
面对大数据，我们的确缺失太多的能力，但我们的需求也确切切实实在改变，对于传统合作伙伴来讲，原有的地盘不会是永远的，需要有一颗勇于改变的心，对于新的合作伙伴，则要抓住这个机会，找到适合自己的切入点，与客户共同成长。

2016-12-13 09:33:13

大数据数据挖掘数字化运营
为大数据定个小目标：从改变惯例开始
大数据决策要真正在企业中落地生根并非易事，它必须能推动企业的自我批判意识，能够不断反思自身的惯例，推动变革。

2016-12-13 09:27:04

大数据惯例目标
大数据如何改变世界？不尽数据滚滚来
大数据让社会生活更智慧的同时，也把人们的生活痕迹印刻在互联网上。人们会担心,自己生活在四面透明的鱼缸里，难有秘密。网络安全，挑战与机遇并存，价值与风险同在，如何趋利避害用好这把双刃剑，将考验人类智慧。

2016-12-13 09:13:38

大数据应用趋势
大数据获取+计算工具+计算平台的能力=人工智能
AI是人工智能，在整个科技发展过程中，科技对人类的进步所起的作用非常大。我们成长期间，就是一个IT科技发展的时期。每个人从大型机转向每个计算机的使用，互联网的普及把我们数据的获取更进一步。

2016-12-13 09:10:36

大数据人工智能计算工具
大数据分析专家？或许这样的人根本不存在！
在任何领域，当然包括大数据领域，都要综合考虑团队和个人的力量。很多时候，我们需要独角兽这样的孤胆英雄，因为他们可以一己之力开疆辟土，带领团队前进。但同时我们需要团队的整体力量，取长补短，鉴定稳步的前进。

2016-12-13 09:05:27

大数据数据分析数据可视化
大数据技术将如何影响艺术？
术不是迎合消费者，不是大众行为，但作为一种密集科学是可以被艺术家尝试和利用，创作出引领时代风尚的作品，在艺术与技术之间架起新的桥梁。

2016-12-13 09:00:13

大数据艺术技术
将数据迁移到云端，很简单！ 译文
使用某种类型的公共云服务，无论来自像亚马逊或微软这样的超大规模提供商，还是来自针对特定客户类型或工作负载的一批小玩家，其效果完全取决于让解决方案提供商可以帮助客户充分利用这类云的技术。

2016-12-12 19:16:43

数据云端
做Data Mining，其实大部分时间都花在清洗数据
很多初学的朋友对大数据挖掘第一直观的印象，都只是业务模型，以及组成模型背后的各种算法原理。往往忽视了整个业务场景建模过程中，看似最普通，却又最精髓的特征数据清洗。可谓是平平无奇，却又一掌定乾坤，稍有闪失，足以功亏一篑。

2016-12-12 18:45:08

Data Mining大数据
腾讯周东祥：腾讯游戏大数据应用技术架构 原创
在本届WOT2016大数据技术峰会的“系统架构”主题专场，来自腾讯的高级工程师周东祥做了“腾讯游戏大数据应用技术架构”的精彩主题演讲。

2016-12-12 17:15:24

游戏大数据
科普篇：什么是大数据
麦肯锡全球研究所给出的定义是：一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。

2016-12-12 16:31:46

大数据决策
科普篇：什么是BI
BI的技术实现路径，总结下来就三点：ETL、建模与平台化展现。这三项技术，一个都不能少。

2016-12-12 16:06:41

BI商业智能
最适合Java开发者的大数据工具和框架
当今编程人员面对的最大挑战就是复杂性，硬件越来越复杂，OS越来越复杂，编程语言和API越来越复杂，我们构建的应用也越来越复杂。根据外媒的一项调查报告，以下列出了Java程序员在过去12个月内一直使用的一些工具或框架，或许会对你有意义。

2016-12-12 14:15:37

Java大数据工具
数据中心空调关键技术——蒸发器
机房空调是数据中心必不可少的重要部件，是保持机房内部恒温恒湿的关键设备。一般空调制冷系统包含有四大部件：压缩机，蒸发器，冷凝器和节流装置，这里压缩机、冷凝器和节流装置都广为人所知，但压缩机却很少有人提及。

2016-12-12 14:11:38

数据中心蒸发器
公安大数据应用研究
各级公安机关快速积累并不断增长的信息数据已成为继警力资源、装备资源之后的新一类核心资源。如何有效利用海量信息并挖掘内在更大的价值，成为提升公安实战应用能力、建立立体化综合防控体系面临的重大难题。政法委书记孟建柱同志指出“谁率先拥有、善于利用大数据，谁就能掌握主动、赢得未来”，郭声琨部长也强调“要大力加强大数据时代公安基层基础工作，不断提高维护公共安全和服务人民群众的能力水平”。

2016-12-12 13:56:39

公安大数据大数据应用
金融大数据的机会
2016年12月3日第19期智能金融沙龙，文因互联非常荣幸地邀请到金融大数据的大咖——北京视野金融的COO张灿，和大家聊聊金融大数据、人工智能金融和新三板数据的分析与整合。

2016-12-12 13:51:32

金融大数据大数据应用
为大数据定个小目标：从改变惯例开始
大数据决策要真正在企业中落地生根并非易事，它必须能推动企业的自我批判意识，能够不断反思自身的惯例，推动变革。

2016-12-12 13:47:40

大数据大数据决策
数据分析产品的下一个进化：基于无埋点的有埋点
一直以来，人们把大数据和埋点技术紧紧捆绑在一起，大数据时代也被称为埋点时代。技术发展，更新更快的无埋点技术横空出世。那么埋点技术是不是就此被判了死刑，无埋点就是万能的了? 非也，二者只会进化的更为高级。

2016-12-12 13:42:54

数据分析大数据埋点
上一页 1 ··· 135136137138139 ··· 187
点赞

51CTO技术栈公众号

业务
速览
在线客服