51CTO首页
内容精选
博客
学堂
精培
企业培训
CTO训练营
开源基础软件社区
元宇宙大会
AISummit人工智能大会
公众号矩阵
移动端
博客 论坛
免费课程 课程排行 直播课 软考学堂
精品班 厂商认证 IT技术 2022年软考 PMP项目管理
在线学习 企业服务
CTO训练营 技术经理研习营 LeaTech峰会
文章 资源 问答 开源课堂 专栏 直播
51CTO
开源基础软件社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
开源基础软件社区订阅号
51CTO学堂APP
51CTO学堂企业版APP
开源基础软件社区视频号
社区编辑申请
注册/登录

大数据

6067内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 6067 条
VMware的Hadoop大数据战略：精明还是错误？
虚拟基础架构云上的Hadoop消除了可靠性问题;通过vSphere,Hadoop应用如果节点失败能够自动重启。此外，虚拟化巨鳄也正致力于同Hadoop社区成员合作，包括Cloudera Inc.、Greenplum、Hortonworks、IBM,继续致力于ASF的可扩展性，这也是Hadoop“虚拟化感知”的要害所在。

2012-06-21 09:56:50

VMware大数据
Hadoop集群系列5:Hadoop安装配置
本文为Hadoop集群系列第五篇，SecureCRT是一款支持SSH（SSH1和SSH2）的终端仿真程序，同时支持Telnet和rlogin协议。

2012-06-25 10:30:06

Hadoop集群
快速部署Hadoop基础架构
据国外媒体消息，为应对海量数据浪潮，VMware启动Serengeti开放原始码计划，便于企业在VMware vSphere虚拟化平台上快速部署与管理Apache Hadoop集群，部署虚拟化技术与分布式计算混用的基础架构。

2012-06-26 15:13:50

Hadoop数据架构
Hadoop集群6：JDK和SSH无密码配置
本文为Hadoop集群系列第六篇，包括JDK和SSH无密码配置。如果你的计算机仅仅作为开发使用时推荐使用这种方法，因为所有用户的shell都有权使用这些环境变量，可能会给系统带来安全性问题。

2012-06-28 10:52:06

Hadoop集群
了解关于Hadoop的12个事实
本文中，分析师给出了关于Hadoop的12点事实，帮助您认识一个真实的Apache Hadoop生态系统。

2012-06-28 15:57:08

Hadoop
大数据计算：Hadoop的前世今生
大数据计算我们把它理解成为一个什么事情呢?目前现在这个时代通信、网络等等这些电子信息技术发展，使数据规模得到了极大的增加。

2012-06-29 09:19:39

大数据
Hadoop集群系列7：WordCount运行详解
本文为Hadoop集群系列第七篇，单词计数是最简单也是最能体现MapReduce思想的程序之一，可以称为MapReduce版"Hello World"。

2012-06-29 10:58:27

Hadoop集群
汉庭酒店打造业务分析和商业智能系统
全面预算解决方案的成功实施，让汉庭酒店集团高级管理层能够深入、多角度地看到非常细节的实时数据、全面了解各部门预算流程执行情况及问题。

2012-07-02 10:17:52

汉庭酒店业务分析商业智能系统
Hadoop集群系列8：Eclipse开发环境设置
本文为Hadoop集群系列第八篇，今天我们讲讲Hadoop条件下，Eclipse开发环境设置。

2012-07-03 08:37:24

Hadoop集群
Facebook的Hadoop应用与故障转移方案
我们知道，Facebook使用Hadoop来进行大数据的处理，但Facebook又是如何保障频繁、庞大的数据请求等高压环境下不发生故障的呢？我们一起来了解一下Facebook内部的Hadoop使用情况以及其NameNode故障转移技术。

2012-07-03 11:38:32

FacebookHadoop
告诉你Hadoop是什么
Hadoop是什么？Hadoop是一个开发和运行处理大规模数据的软件平台,是Appach的一个用java语言实现开源软件框架，实现在大量计算机组成的集群中对海量数据进行分布式计算.

2012-07-03 16:56:12

Hadoop
关于大数据 CEO们需要了解的五个问题
大数据是当下最热门的技术词汇，而且它的确有充足的理由证明自己的热度。其处理巨大数据量的能力在之前是无法想象的，而现在，各行各业都可以借助这种大数据处理的能力，且不需要类似超级计算机这样的硬件条件。

2012-07-04 17:06:53

大数据
Hadoop集群系列9:HDFS初探之旅
本文为Hadoop集群系列第九。HDFS（Hadoop Distributed File System）是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础篇，今天我们讲讲Hadoop条件下，Eclipse开发环境设置。

2012-07-05 10:51:57

Hadoop集群
大数据时代最缺的是什么？人才 原创
大数据已经是IT业界耳熟能详的词语，现在每一场技术盛会上不谈论大数据你都不好意思跟人打招呼。Hadoop、Mapreduce、NoSQL以及各大厂商自己的软硬件大数据解决方案层出不穷。不过大数据时代的中国最缺的是什么呢？人才。

2012-07-17 10:54:21

大数据
Oracle内存数据仓库Exalytics
Oracle Exalytics硬件被设计在一个3U的机架单元中，并针对商业智能工作负载中的内存分析进行了优化。多个Oracle Exalytics机可以聚集在一起，以扩大可用内存容量，从而提供高可用性

2012-07-23 14:38:16

Exalytics
交通银行基于Teradata数据仓库平台构建事件式营销系统
全球金融市场竞争日趋激烈，各大银行的产品和服务差异越来越小，银行正将赢利聚焦点转向“以客户为中心”。全球领先的数据分析解决方案厂商Teradata天睿公司(Teradata Corporation，美国纽约证券交易所交易代码：TDC)再度助力中国第五大商业银行——交通银行，以数据仓库平台为基础，构建事件式营销系统，实现了经营效益与管理效率双丰收。

2012-07-24 13:52:32

Teradata
大数据时代 数据分析师的尴尬
这个七月着实忙碌了好久，也是工作的小事情不断，回头想想自己忙什么了，感觉好像真的没什么忙的，不过却又忙碌了这些天。这也是导致这么多天啥也没写的原因。确实现在有点感受到了一个好朋友说的，东西很散，有时候太忙了，没办法写出来。体味了一下这样的感觉，确实很忙，不过每天还是可以拿出那么一点时间来写些东西。

2012-08-07 17:32:25

数据分析师
浅谈数据分析师的级别
我们将简单谈一下数据分析师的集中级别，及其工作的大概范围。供大家参考。

2012-08-08 09:00:29

数据分析师
用Hadoop和MapReduce进行大数据分析
Google在2001年发布图像搜索功能时，只有2.5亿索引图像，不到10年，这个巨大的搜索功能已经可以检索超过100亿个图像了，每分钟有35小时的内容上传到YouTube。据称，Twitter每天平均5500万条记录。早些时候，搜索功能每天记录6亿条查询记录。这就是我们讨论大数据的意义所在。

2012-08-08 09:53:23

HadoopMapReduce
图解数据挖掘K-means算法
K均值聚类算法是指将n个观察值分成k个类，使得每一类中的观察值与该类的均值最接近，与其他的类的均值较远。

2012-08-09 09:57:54

K-means
天云趋势联合中云学院举办Hadoop培训 火热报名中
天云趋势联合中云学院举办Hadoop培训 火热报名中

2012-08-09 15:40:16

Hadoop培训
运用大数据为你推荐最爱的景点
大数据时代下，不光是Google、Facebook这样的大企业可以做好大数据的分析工作，越来越多的创业公司也开始了自己的大数据之旅。

2012-08-20 09:56:48

大数据
2012 IBM软件技术峰会 大数据预见未来 原创
2012年8月23日，北京国际饭店会议中心，2012 IBM软件技术峰会盛大起航。本次技术峰会涵盖大数据、云计算、敏捷开发和移动开发四大方面，将会有多位IBM技术领头人和专家亲临会场与广大开发者交流。

2012-08-23 08:56:36

IBM大数据
Google Dremel让大数据不再“恐怖”
Mike Olson是硅谷创业公司Cloudera的CEO，这家公司专门围绕开源软件平台Hadoop发展自身的业务。也许很多人对Hadoop并不是很了解，但是Google正是依赖它成为网络世界最具主导力的巨头。预计到2016年，Hadoop将为整个软件市场创造8.13亿美元的价值，但是Mike Olson居然很淡定的表示这个已经不是什么新闻了。

2012-08-27 10:04:20

Google Drem
开源八预言：桌面linux必亡、Hadoop要火_IT技术周刊第286期_51CTO.com 原创
近两年，在IT圈中开源这个词已经变得越来越常见，人人开口闭口谈云计算OpenStack、大数据Hadoop、手机Android，开源Linux。开发者、运维人员和IT媒体们也开始关注Eucalyptus、OpenStack、Hadoop、Ubuntu这些开源项目。

2012-08-27 10:23:24

IT技术周刊
海量数据的二度人脉挖掘算法（Hadoop 实现）
最近做了一个项目，要求找出二度人脉的一些关系，就好似新浪微博的“你可能感兴趣的人” 中，间接关注推荐；简单描述：即你关注的人中有N个人同时都关注了 XXX 。

2012-08-28 09:15:33

Hadoop海量数据挖掘算法
Twitter将采用Spark分析大数据
Twitter数据科学家Edwin Chen最近在接受媒体采访的时候透露，Twitter内部希望尝试一种全新的大数据系统——Spark。

2012-08-30 14:33:03

Spark
与小象共舞 领略Hadoop风采——Hadoop培训9月火热报名中
据预测，到2020年，电子数据存储量将在2009年的基础上增加44倍，达到35万亿GB。根据IDC数据显示，截止到2010年，这个数字已经达到了120万PB，或1.2ZB。如果把所有这些数据都存入DVD光盘，光盘高度将等同于从地球到月球的一个来回也就是大约 480,000英里。在这个巨大的数据金矿面前，Hadoop作为对大量有序或无序数据集合的挖掘工具显得尤为亮丽，或普通了解或全面掌握Hadoop成为从事云计算和大数据挖掘工作人员的一项必修课。

2012-08-31 14:38:23

Hadoop
如何让Hadoop运行得更快一些？
在数据处理方面，我们发现数据输入速度一般要比的数据处理速度快很多，这种现象在大数据领域尤为明显。随着数据不断膨胀，相应的响应时间自然要有所增加，数据处理的复杂度也在不断提高。对于Hadoop来说，如何提升它的速度呢？来看看下文。

2012-09-11 09:16:52

Hadoop
Hadoop成功部署案例之通用电气(GE) 译文
上文讲过《Hadoop成功部署案例之eBay篇》后，为大家带来第二篇Hadoop成功案例介绍。在本文中为大家介绍的是通用电气公司的Hadoop成功实施方案。据通用电气公司（GE）Hadoop技术部的产品经理Linden Hillenbrand声称，情感分析很棘手——它不仅仅是个技术挑战，还是个业务挑战。

2012-09-11 09:57:09

Hadoop部署方案
Hadoop集群搭建之SSH无密码登录配置
在多台电脑上搭建Hadoop集群已经有一段时间了，SSH无密码登录服务配置成了一道无法逾越的鸿沟，在启动hadoop集群时，老是让输入datanode也就是slave的密码，但是输入密码但却总是提示permission denied，启动不了datanode。为什么呢？下面就对ssh密码登录其他主机做一个粗略的说明。

2012-09-13 13:26:40

Hadoop集群
通过Informatica释放Hadoop强大潜能
在大数据时代，许多人寄希望于Hadoop厂商们能够开发出成熟可靠的工具、功能和技术创新，以更经济的方式、更好的性能实现数据处理和分析。拥有近20年数据集成创新经验和领导才能的Informatica，扩展了其数据集成平台以支持Hadoop，最新发布的Informatica 9.5提供了全新及扩展功能，极好的释放了Hadoop潜能，帮助客户实现大数据最大投资回报。

2012-09-13 16:59:06

InformaticaHadoop大数据
Hadoop 2.0集群配置详细教程
Hadoop是apache的开源项目，开发的主要目的是为了构建可靠，可拓展scalable ，分布式的系统， Hadoop是一系列的子工程的总和。我们今天就谈谈Hadoop 2.0集群配置。

2012-09-18 09:55:44

Hadoop 2.0
分布式计算Hadoop简介
Hadoop是什么：Hadoop是一个开发和运行处理大规模数据的软件平台，是Appach的一个用java语言实现开源软件框架，实现在大量计算机组成的集群中对海量数据进行分布式计算。

2012-09-19 14:09:20

Hadoop开源
基于流的数据处理可以使Hadoop运行更快吗？
Apache Hadoop分布式文件处理系统是有好处的，而且它正在获得注意力。然而，它也有坏处。有些组织发现从Hadoop开始的话需要重新思考软件架构，而且它所需要的数据技能也是必要的。

2012-09-20 11:23:18

Hadoop云计算
云与开放是火车订票服务的未来必然趋势
每到五一、国庆、春节等重大公休假日，抢火车票就变成一种时尚活动，无论是六七十岁的大爷太婆，还是十八七的小年轻，都不得不一早去火车站、代售点盯票，看着人龙一步步腾挪心急如焚，就像是上了屠宰场然后引颈受戳的死刑犯。

2012-09-21 09:41:27

火车订票网络订票订票服务
大数据存取的选择：行存储还是列存储？
目前大数据存储有两种方案可供选择：行存储和列存储。业界对两种存储方案有很多争持，集中焦点是:谁能够更有效地处理海量数据，且兼顾安全、可靠、完整性。

2012-09-26 10:42:11

大数据
大数据利器Hadoop的应用现状和发展趋势
Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。用户可以利用Hadoop轻松地组织计算机资源，从而搭建自己的分布式计算平台，并且可以充分利用集群的计算和存储能力，完成海量数据的处理。

2012-09-28 11:00:19

大数据Hadoop
DB-Engines全新数据库排名Oracle居首
DB-Engines 发布最新的数据库系统排名，该排名中 Oracle 居首，而开源的 MySQL 数据库排名第三。详细的数据排行情继续看下文……

2012-10-08 09:21:37

DB-EnginesOracle数据库
福布斯：大数据或因提前成为行业标准而消亡
与其他多数热门词不同的是，“大数据”的受追捧程度却一直保持了数年之久。如果不能成为科技产业今年的流行词的话，“大数据”至少已经成为第三季度的热词。

2012-10-09 11:04:03

福布斯大数据Big Data
数据科学家：21世纪最性感的职业
2006年Jonathan Goldman到商业社交网站LinkedIn工作，那时的LinkedIn还只是刚创业不久，网站注册人数不到8百万，但是很多成员会邀请自己的朋友和同学加入，因此注册人数迅速增加。但是用户要找到已经在网站注册的用户不太容易，比例达不到管理人员的期望值。很明显，有些社交体验缺失了。

2012-10-09 13:41:09

数据科学家职业
福布斯：大数据或因提前成为行业标准而消亡
与其他多数热门词不同的是，“大数据”的受追捧程度却一直保持了数年之久。如果不能成为科技产业今年的流行词的话，“大数据”至少已经成为第三季度的热词。

2012-10-12 09:39:32

大数据
今年会不会感冒？大数据告诉你！
TwitterHealth是纽约罗彻斯特大学发起的一个研究项目，可以通过分析用户的Twitter微博内容来预测用户会不会感冒，然后通过短信通知你该地区已经有多少人患有流感。这是一个非常有意思的项目，详细请下文。

2012-10-17 10:09:14

大数据大数据管理数据挖掘
Cloudera Impala：将Hadoop变为分析型数据库
虽然Impala同Hadapt相比还略显不成熟，但是它还是有很多优势：它是免费的；它的可管理性更好；它针对一些环境的性能是非常好的。Monash认为Impala将成为Hadoop转向分析型数据库的重要工具。

2012-11-01 10:01:56

HadoopClouderaImpala
Hadoop之父Doug Cutting勾勒大数据平台的未来
Apache Haddo是一个批处理计算引擎，它是大数据核心的开源软件框架。Hadoop并不适用于真正实时数据可见性所需要的在线互动式数据处理，是这样的吗?Hadoop创造者兼Apache Hadoop项目创始人(同时也是Cloudera公司首席架构师)Doug Cutting表示，他相信Hadoop有一个超越批处理的未来。

2012-11-07 13:31:53

Hadoop大数据
Ubuntu 12.04搭建hadoop单机版环境
在11月初的时候，我们了解了Ubuntu 12.04 搭建 hadoop 集群版环境的方法，今天再来看看在单机版环境中，Ubuntu12.04搭建hadoop是如何实现的。

2012-11-07 17:25:46

hadoopUbuntu 12.0
大数据提速：Impala能否取代Hive
Cloudera发布Impala实时查询引擎Impala 1.0 beta版，并声称这项革命性的技术能解决Hadoop批处理延迟问题。

2012-11-08 10:09:57

大数据HIVE
Facebook打破Hadoop最大容量上限
你可能会认为，100拍（petabyte）字节对于任何公司来说都是非常大的数据量级了。但是对于社交网站明星Facebook而言，100拍字节的数据根本不算什么。

2012-11-14 09:20:00

大数据PrismHadoop
HBase设计：看上去很美
随着hadoop系列的兴起，基于HDFS的大规模KV存储系统HBase也进入“大规模使用阶段”。网上的Hbase资料很多，学习成本正在下降。从公开的资料看，国外facebook、国内taobao均宣称在线上环境大规模使用hbase。一切都让人很兴奋。

2012-11-14 09:48:57

HBase大数据
R语言与GIS实践:Shapefile导入与地图显示
R语言和GIS的结合，之所以要使用R语言是因为R语言能够以Hadoop集成,希望利用R语言更高效地处理空间聚类问题。

2012-11-15 16:49:03

GISShapefile
上一页 1 ··· 116117118119120 ··· 122

全部话题

大数据
数据分析
数据可视化
商业智能
Hadoop
Spark
数据湖
数据仓库
人工智能 云计算 开源 网络 安全 系统
全部话题

相关专题 更多

直播：昇腾AI开发者创享日·南京站
直播：昇腾AI开发者创享日·南京站
SUSE，相信开源的力量
SUSE，相信开源的力量
2022-08-16 16:41:35
论剑“网络风云” 共享“体验至上”
论剑“网络风云” 共享“体验至上”
2022-08-16 16:41:35
点赞

51CTO技术栈公众号

业务
速览
在线客服