51CTO首页
AI.x社区
博客
学堂
精品班
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

大数据

8917内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8917 条
落地开花：大数据的应用领域在不断拓宽
数据的价值在于能够产生业务价值，而产生业务价值的多少取决于数据带来的视野的宽度和深度，以及对明智决策的支持度。从这个角度将，在资源不限的理想情况下，越多的数据来源，越能够带来宽度和广度，从而得到越好的决策支持度。

2015-07-29 13:20:49

应用大数据
大数据时代：统计学是数据分析的灵魂
7月中旬以来，从中央到地方，今年上半年经济社会发展的统计数据陆续进入人们的视野。在观察、使用统计数据时，类似“大数据时代怎样用好数据”这样的话题，再次引起人们的关注。

2015-07-29 11:27:28

大数据时代数据分析统计学
R语言如何增强数据科学？
当今数据科学领域最流行的工具之一是开源编程语言R语言，它广泛的应用于各个领域。简单来说，R语言就是一种数据语言。过去的20年间，全世界的统计学家已经为开源语言R语言做出了许多创新性的贡献。

2015-07-29 11:14:20

r语言数据科学
知识分享：详解Hadoop核心架构
通过对Hadoop分布式计算平台最核心的分布式文件系统HDFS、MapReduce处理过程，以及数据仓库工具Hive和分布式数据库Hbase的介绍，基本涵盖了Hadoop分布式平台的所有技术核心。

2015-07-29 10:36:05

hadoop数据挖掘
经验分享 ：数据产品开发前的必修课
既然是数据产品，一定离不开数据图表。而要做图表，首先得确定指标和维度。最直观的说：指标就是图表中纵坐标轴；维度就是横坐标轴。

2015-07-29 10:25:05

数据开发产品必修课
大数据应用现状：从发现价值到创造价值
从发现价值到创造价值， 大数据将成为“互联网+” 产业升级的驱动力。 过去，数据的价值主要应用在决策领域，典型应用是商业智能(BI, Business Intelligence)在企业经营管理层面的应用， 即通过数据收集、管理和分析等方法，将数据转化为知识， 发现数据的价值，进而提供决策支持。

2015-07-29 09:51:26

大数据应用现状价值
大数据显示：百姓对房地产后市保持积极态度
4月份以来，各地方营业税改革细则出台，直接刺激成交量上升，为房地产商品的提价创造了空间大众对楼市进一步回暖企稳保持积极态度。

2015-07-29 09:28:34

房地产经济统计
大数据背景下的“贵漂”生活
漂一族”对很多现代人来说，并不是一个陌生的词汇。它指的是那些离开故乡，出门在外工作的年轻人。在“漂一族”中，以“北漂”这个群体最为庞大，也最有名。但在我生活的贵州省会城市贵阳，同样有一群青年，怀揣着共同的梦想来此打拼，他们被称为“贵漂”。

2015-07-29 09:07:15

大数据北漂
数据分析师？架构师？科学家？大数据时代的热门职业
大数据已是当下信息时代一个非常热的概念，大数据时代到来，将给人才发展带来哪些机会？谁将是未来最热门的人才？大数据时代的热门职业都有哪些？让我们一起来看看吧

2015-07-28 17:00:30

架构师数据分析职业
张丹：均值回归 发现逆市中的投资机会 原创
在股票市场中有两种典型的投资策略：趋势追踪(Trend Following) 和 均值回归(Mean Reversion)。 趋势追踪策略的特点在大行情的波动段找到有效的交易信号，不仅简单而且有效，我之前写的一篇文章 两条均线打天下 就属于趋势追踪策略。而均值回归策略则是一种反趋势策略，一波大幅上涨后容易出现下跌，而一波大幅下跌后容易出现上涨。其特点在振荡的在震荡的市场中非常有效，捕捉小的机会，本文就将介绍这种策略。

2015-07-28 16:54:09

股票大数据股市
张丹：如何借均值回归发现逆市中的投资机会？ 原创
在股票市场中有两种典型的投资策略：趋势追踪(Trend Following) 和 均值回归(Mean Reversion)。 趋势追踪策略的特点在大行情的波动段找到有效的交易信号，不仅简单而且有效，我之前写的一篇文章 两条均线打天下 就属于趋势追踪策略。而均值回归策略则是一种反趋势策略，一波大幅上涨后容易出现下跌，而一波大幅下跌后容易出现上涨。其特点在振荡的在震荡的市场中非常有效，捕捉小的机会，本文就将介绍这种策略。

2015-07-28 16:52:00

股票大数据股市
基于Hadoop的大规模网络流量分析
分布式数据系统HDFS保证了备份数据的数量均匀分布在集群内部的各个节点上，数据更不易因机器的故障而丢失。本文基于Hadoop设计实现了适用于大规模网络流量的分析系统，使用了四个节点构成的分析集群，用来和一个单点SILK的数据流分析工具进行对比，结果表明该方法在大量数据的情况下相比于传统的流分析工具具有更好的效率、可靠性及可扩展性。

2015-07-28 15:58:26

Hadoop大规模网络流量分析
数据挖掘：基于机器学习方法的POI品类推荐算法
在美团商家数据中心（MDC），有超过100w的已校准审核的POI数据（我们一般将商家标示为POI，POI基础信息包括：门店名称、品类、电话、地址、坐标等）。如何使用这些已校准的POI数据，挖掘出有价值的信息，本文进行了一些尝试：利用机器学习方法，自动标注缺失品类的POI数据。例如，门店名称为“好再来牛肉拉面馆”的POI将自动标注“小吃”品类。

2015-07-28 15:41:06

机器学习算法数据挖掘
六种可用于互联网金融风险控制的大数据来源
近年来，以第三方支付、P2P平台、众筹为代表的互联网金融模式引起了人们的广泛关注，该模式大量运用了搜索引擎、大数据、社交网络和云计算等技术，有效降低了市场信息不对称程度，大幅节省了信息处理的成本，让支付结算变得更便捷，达到了同资本市场直接融资、银行间接融资一样高的资源配置效率。

2015-07-28 14:58:04

互联网金融大数据
高校就业离“大数据”并不遥远
2015届大学毕业生就业进入收尾。几天前，同济大学有一个静悄悄的“大动作”——与大型综合性就业招聘网站“前程无忧”签约合作，携手分析招聘用人信息的海量数据，更精准指导未来大学生求职。

2015-07-28 13:57:22

高校就业
大数据带来六种全新商业模式
人们认为“数据是新型石油”，一种需要企业加以利用和改进的天然资源。这是事实还是炒作?Mohamed Zaki解释说，虽然许多公司已经从大数据中获益，但这也提出了严峻的挑战。

2015-07-28 13:45:14

大数据商业商业模式
浅析大数据是“互联网＋”的DNA和血液
说到互联网+我们需要首先讲一讲什么是互联网，既然说到大数据我们看一些数字。

2015-07-28 13:36:19

互联网互联网+
用大数据分析管理现代食物链
我们的食物链到处充斥着浪费，不过广泛分布的传感器和大数据分析的综合利用有望帮助我们有效地保护这些资源。

2015-07-28 13:17:35

传感器食物链
论证：为什么大数据是下一个浪潮？
今年上半年互联网热出现一个新动向，就是入口和应用场景的争夺已到了短兵相接、贴身肉搏的激烈程度。巨头们争夺的最终目标是数据资源。数据已成为 DT（数据技术）时代的核心要素。世界经济论坛报告曾经预测： “未来的大数据 将成为新的财富高地，其价值可能会堪比石油”，成为战略性资源。

2015-07-28 11:22:30

大数据浪潮
大数据在美国 已完成从灰姑娘到公主的蜕变
大数据的老家在哪里？如果从血脉渊源来看，应该在美国。麦肯锡的报告、自然杂志的专刊，以及Gartner、IBM专家的演说都证明了这一点。今天我们就来聊一聊她和她的家乡。

2015-07-28 11:09:38

大数据灰姑娘
基于HBase构建可伸缩的分布式事务队列
在HBase的帮助下，结合最佳实践，我们该如何创建了一个线性可伸缩的，分布式事务队列系统。

2015-07-28 10:14:33

HBasehadoop
Hadoop可能已经达到预期的成熟度
五年前，Hadoop用可以解决所有大数据难题的身份杀入主流市场。如今尘埃已经落定，现在是时候对Hadoop展开更切合实际的评估了。

2015-07-28 09:55:47

Hadoop
调研：中国大数据应用与全球仍有差距
3月12日,IBM发布了全新《分析：速度的优势》白皮书，该白皮书基于IBM对60全球多个国家中超过1000位业务和IT高管的深度调研，对当前大数据在中国及全球企业应用的现状进行了全面分析。

2015-07-28 09:40:46

大数据应用应用调研
我懂你！看大数据如何来俘获客户的心
"大数据"的概念远不止大量的数据（TB）和处理大量数据的技术，或者所谓的"4个V"之类的简单概念，而是涵盖了人们在大规模数据的基础上可以做的事情，而这些事情在小规模数据的基础上是无法实现的。

2015-07-28 09:02:20

大数据客户
大数据公司Palantir为何估值200亿美金？仅次Uber小米Airbnb
7月24日，据本月递交给美国证券交易委员会（SEC）的文件显示，硅谷神秘的大数据公司Palantir Technologies已经成功融资约4.5亿美元。

2015-07-27 17:34:49

小米uberPalantir
大数据基金该怎么投？
自去年以来，大数据基金纷纷成立。在运作了将近一年的时间里，这些大数据基金体现出来的特性如何？适合什么样的投资人？如何投资才能收益最大化？

2015-07-27 17:04:35

基金股票大数据
大数据爆出秘密——爱喝酒的“女汉子”越来越多
近日，全国最大的互联网代驾信息服务平台e代驾数据中心发布了一份《2015杭州二季度代驾数据报告》。这份报告的样本采集自今年第二季度4月—6月期间杭州地区的代驾数据。从某种角度来看，这些数据也体现了杭城夜生活的一些缩影。

2015-07-27 16:25:20

女汉子喝酒大数据
车品觉：跟小学生讲大数据
近日有机会给一群即将毕业的小学生(香港保良局林文灿英文小学)做演讲，介绍大数据，当中一些关于数据时代的思考方法或许值得在此与读者分享。

2015-07-27 14:28:45

大数据
都说大数据只是一个大忽悠
随着大数据概念的不断发展，人们对于大数据的期望很高，但是实际的应用过程中，又存在这样那样的问题，于是有很多言论出来了，这些对于大数据的言论告诉我们大数据其实只是一个大忽悠。

2015-07-27 10:34:55

大数据大忽悠
6个备份数据的去重加密工具
无论是体积还是价值，数据都在不断增长。快速而可靠地备份和恢复数据正变得越来越重要。社会已经适应了技术的广泛使用，并懂得了如何依靠电脑和移动 设备，但很少有人能够面对丢失重要数据的现实。

2015-07-27 09:33:26

备份数据加密工具
行为数据如何帮助出借人评估用户信用?
以往，出借人凭借信用报告来评估用户的信用度。良好的信用记录往往意味着借款人值得信赖；而糟糕的信用记录或者较低的信用值往往表示借款人风险较高。但是，单凭信用记录很难做出全面的评估。

2015-07-27 08:55:52

数据信用
业界新生代：世界五家超有潜力的大数据供应商
数据分析早已经是IT行业火热的词汇，大数据相关的厂商层出不穷。最新的大数据供应商中不乏生命力强而又有巨大潜力的存在。现在世界上有五家最具潜力的大数据供应商，你了解吗？

2015-07-23 14:57:36

大数据供应商
盘点：大数据公司的四种数据获取方法
对于所有号称涉足大数据的互联网公司而言，可以从两方面判断其前景与价值，其一是否有稳定的数据源，其二是否有持续的变现能力，其中包含数据理解运用的经验积累。涉及大数据的公司发展在互联网时代如雨后春笋，除了巨头百度腾讯阿里巴巴外，还有一些成立时间不算久但底蕴深厚的公司。如国云数据、帆软等。不过不管公司多大，获取数据都是非常重要的基础。

2015-07-23 14:50:28

大数据
大数据：Spark和Hadoop是友非敌
Spark 在 6 月份取得了激动人心的成绩。在圣何塞举办的 Hadoop 峰会上，Spark 成了人们经常提及的话题和许多演讲的主题。IBM 还在 6 月 15 号宣布，将对 Spark 相关的技术进行巨额投资。

2015-07-23 14:29:28

大数据sparkhadoop
大数据时代小数据分析
大数据挖掘需要精通数据库、计算机编程和深厚的统计学基础，有的甚至要涉及运筹学范畴，是一门复合型的应用科学。大数据的案例现在着实是一抓一大把，比如国外典型的”啤酒与尿布”的案例，在了解数据分析之前，不妨来看看几个有趣的应用案例。

2015-07-23 09:34:57

大数据数据分析
融资数据全解析：我们离互联网泡沫有多远？
根据NVCA披露的最新数据，在2015年第二季度，VC总共进行了167亿美元的投资，大约是2000年互联网泡沫时候同期的66%，且这个势头看上去还会继续。而这些投资的很大一部分是由共同基金和对冲基金这些非传统的投资机构所贡献的，占了所有投资金额的40个百分比。尽管当前某些方面跟互联网泡沫时期很相似，但还是有不少地方是大相径庭的。

2015-07-22 17:23:08

融资互联网泡沫大数据
“互联网+”下的金融大数据风口解码
目前，金融行业数据量巨大，是继互联网及运营商之后大数据产生最为庞大的热点行业之一，其中非结构化数据迅速增长，加上金融行业雄厚的资本背景，金融行业已经成了大数据应用的一片沃土。

2015-07-22 11:07:08

互联网+金融大数据
大数据分析如何帮助医院挽救败血症患者生命
大数据、预测分析、实时、可行动的洞察力等都是围绕着通过数据发掘其中价值的时髦词语。有时候一些好处仅限于圈内人士知晓，或是至少难以显现出来，但是有时候一些好处是显而易见的，例如对抗美国第一大死因败血症时。

2015-07-22 10:43:41

大数据医疗白血病
大数据的强大后台：云计算
云计算行业正在迅速发展，同时也产生了很多术语。那么这个‘云’到底是什么呢？它又可以为我们带来什么呢？简单地说，云计算有三个部分：基础设施服务（Infrastructure-as-a-Service, IaaS），平台服务（Platform-as-a-Service, PaaS），软件服务（Software-as-a-Service, SaaS）。

2015-07-21 12:57:03

大数据云计算
爬了3000万QQ用户数据，挖出了花千骨赵丽颖的QQ号
目前已经爬到我的第7圈好友（depth=7）共3000万数据，目前的瓶颈在家里的网速和电脑的配置上。 最快的时候爬取速度达到一天500W新Q数据。

2015-07-20 16:55:58

用户数据花千骨赵丽颖
大数据时代是必然 人类正处在新时代的起点上
大数据时代已然展露出其恢宏磅礴的历史趋势，但没有人能够预见在新常态下它到底将扮演何种角色，到底将如何改变世界。在信息大爆炸，数据量飞速增长的今天，大数据时代已成为一种必然。我们可以把大数据看成是数字世界对物理世界的镜像，以现在物理世界的数字化程度来看，目前的镜像度不超过5%。

2015-07-20 16:32:27

大数据新时代
企业没有大数据，只有坏数据
PayPal 联合创始人兼风险投资人彼得·蒂尔（Peter Thiel）经常抱怨科技圈一直在过度使用像“云端”和“大数据”这样的流行词。虽然他 不是唯一一个长期表达这种观点的人 ，但是大部分企业似乎仍然没有充分理解这条信息。

2015-07-16 14:02:52

大数据坏数据
来自Twitter的Hadoop优化经验：集群越大越明显！
此文介绍了Twitter的核心数据类库团队，在使用Hadoop处理离线任务时，使用的性能分析方法，及由此发现的问题和优化手段，对如何使用 JVM/HotSpot profile(-Xprof)分析Hadoop Job的方法调用开销、Hadoop配置对象的高开销、MapReduce阶段的排序中对象序列化/反序列的高开销问题及优化等给出了实际可操作的方案。32个赞!

2015-07-16 10:11:38

TwitterHadoop集群优化
移动应用安全战场赤膊拼杀，大数据能否拯救百亿市场
随着移动互联网的迅速普及，智能手机已经进入风险爆发期，智能手机用户遭受网络欺诈并造成财产损失的数量将直线上升。这一趋势将促使移动安全市场迅速成熟，一个规模百亿的新市场成为众多移动应用安全商掘金的新蓝海。

2015-07-15 15:41:49

大数据
Spark 和 Hadoop 是朋友不是敌人
6月15日，IBM 宣布计划大规模投资 Spark 相关技术，此项声明会促使越来越多的工程师学习 Spark 技术，并且大量的企业也会采用 Spark 技术。

2015-07-15 10:11:31

SparkHadoop
大数据分析到底需要多少种工具？
JMLR杂志上最近有一篇论文，作者比较了179种不同的分类学习方法（分类学习算法）在121个数据集上的性能，发现Random Forest（随机森林）和SVM（支持向量机）分类准确率最高，在大多数情况下超过其他方法。本文针对“大数据分析到底需要多少种工具？

2015-07-08 15:07:23

大数据分析多少种工具
将Hadoop作为云托管服务的优劣势分析 译文
Hadoop 之所以广受欢迎，就是因为它为使用大众化硬件处理大数据提供了一种几乎没有限制的环境。添加节点是个简单的过程，对这个框架没有任何负面影响。虽然Hadoop统一了分布式计算，但是配备和管理另外的数据中心、更不用说与远程员工打交道，增添了复杂性和成本。结果就是，Hadoop集群可能显得过于孤立。

2015-07-08 09:19:56

HaaSHadoop即服务云端Hadoop
Spark的快难道是以丧失正确性为代价的？
Spark最著名的一篇论文是：《Spark: Cluster Computing with Working Sets》。当你读它的时候你需要明白：文中代码不保证计算结果是正确的。具体来说，它的Logistic Regression的代码在map阶段用到了accumulator。下面解释为什么这么做是错误的。

2015-07-06 14:54:19

Spark计算正确性Hadoop
毕业季特刊：剥开大数据的层层面纱 原创
前几天和长辈闲聊之下，“大数据”，竟然也从老人家嘴里蹦出来。真是 duang的一声，把我吓了一跳。大数据，真不再是只可远观，高大上的主了。现在正是毕业季节，应届生都在都在东奔西走的找工作，如果你恰巧你找的工作是大数据方面的，希望这个小版块能帮到你。

2015-07-03 13:27:02

大数据大数据分析
大数据虽然很热 但也需要冷处理
相关的体系和政策是要形成，但是现阶段的大数据还是处于企业单独进行的程度，如果可以形成统一的发展体系，也不乏是一种更好的方式。

2015-07-03 10:42:28

大数据冷处理
上一页 1 ··· 155156157158159 ··· 179
点赞

51CTO技术栈公众号

业务
速览
在线客服