鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

大数据利器：Spark的单机部署与测试笔记

Spark作为最有可能代替mapreduce的分布式计算框架，正受到广泛的关注。相比Hadoop来说，Spark的中间计算结果存于内存无疑给计算过程节省了很多时间，于是想试试看其与Hadoop有什么不一样的地方，就有了这篇Spark的单机部署与测试笔记。

2014-05-16 10:55:47

大数据绝非万能它不适合处理这10件事情

每个组织机构都对大数据应用寄予厚望，期待它可以解答长期存在的业务问题，让他们在市场集中镇南关，在产品、服务交付中更具竞争力。这种对于大数据获益的预期很难实现，除非给予足够的指导和帮助。这里列举不适合大数据的10件事情，除非你能够采取正确步骤优化其价值。

2014-05-16 09:54:36

数据可视化调查：易用和开源产品更受欢迎

大数据时代一个显著特征就是数据可视化的崛起。作为数据最上层的展现环节，数据可视化将技术与艺术完美结合，借助图形化的手段，清晰有效地传达与沟通信息。一方面，数据赋予可视化以意义;另一方面，可视化增加数据的灵性，两者相辅相成，帮助企业从信息中提取知识、从知识中收获价值。

2014-05-16 09:52:16

数据可视化

WOT峰会《GoRedis：SSD替代方案》陌陌CTO李志威

GoRedis是笔者基于RocksDB，用Go语言编写的高效RedisServer。借助SSD可以实现海量数据存储，并提供非常高的读写性能。目前已在陌陌内部大范围替代Redis，节省非常多内存资源，因为基于RocksDB，同时也获得数据安全持久化、快速启动、增量同步等特性。

2014-05-13 14:11:36

大数据时代如何做好游戏的用户研究

对于网络游戏中，对用户大数据的研究。如果想了解用户研究在不同阶段都在做些什么，这篇分享可以帮助你了解下。

2014-05-13 10:11:30

数据挖掘之七种常用的方法

利用数据挖掘进行数据分析常用的方法主要有分类、回归分析、聚类、关联规则、特征、变化和偏差分析、Web页挖掘等，它们分别从不同的角度对数据进行挖掘。

2014-05-13 09:56:24

传统IT列强和互联网新贵们如何应对大数据浪潮

本文简单分析了大数据这个领域内，不同类型的公司大数据的理念和做法有哪些不同。大数据到底是BI Plus，还是一个大的智能平台？IBM、Oracle等大IT公司怎么看待大数据？Google、Baidu等互联网的巨头们怎么看待大数据？

2014-05-13 09:44:03

数据可视化高手的自我修养

数据可视化是一种将数据转换为便于理解和使用的图表的艺术和技术。随着大数据技术的广泛使用，精通数据可视化艺术的人才将在职场上占据有利的位置。

2014-05-12 10:02:56

数据可视化

Redis及Ubuntu14下搭建SSDB主从环境

在工作中接触到了Redis，Redis是一个非常高效的key-value的数据库，在项目中广泛使用，但是redis很明显的缺点是对于内存的处理，在项目上线之初，必须对内存规划合理，否则很容易出现内存爆了的现象，一般较合理的内存大小为电脑物理内存的3/5。

2014-05-12 09:59:49

Redis Ubuntu 主从环境

一文读懂R语言取代SAS做所有的事情

以下5种语言 NODE、LUA、Python、Ruby、R ，哪个在2014年的应用前景会更好？

2014-05-12 09:57:36

大数据分析，什么样的美女最受男生青睐？

这篇文章探讨的是女性吸引力，但没有通常看到的照片分析之类的东西。相反，我们采用过去的女人图片，分析她在男同胞们头脑里产生的反应。

2014-05-09 13:24:06

谷歌豪掷1.3亿美元投资大数据癌症医疗企业

谷歌风投（Google Ventures）日前展开了公司历史上最大一笔医疗软件投资，该公司将为大数据肿瘤医疗行业创业公司Flatiron Health提供1.3亿美元融资，并希望今后医生能够根据该公司所收集的数据作出更加精确的临床诊断。早期风险投资公司First Round Capital、临床实验室服务提供商Laboratory Corporation of America Holdings以及其他一些天使投资人同样参与了此次B轮融资。

2014-05-08 15:28:39

谷歌大数据

tornado使用redis来实现session分布式存储

以前更多是用tornado memcached来存储session或者cookie，因为报警平台中已经在用redis、mongodb这些nosql数据库，没必要再配置memcached了。这次用我钟爱的redis了。

2014-05-08 14:38:26

tornado redis session

大数据失败案例：学生数据收集机构inBloom的兴衰

在“大数据”大行其道的时候，它在教育中的应用似乎并不是那么得心应手。inBloom，一个美国非营利学生数据存储机构，在短短的15个月内，由于公众的抗议，从气势如虹到黯然关闭。从中，我们能得到什么?

2014-05-08 14:10:32

用大数据监视森林火灾和非法砍伐

大数据用于环境保护，科研人员开发新的森林映射工具，当大片森林被砍伐、被破坏时，工具将对监视者发出声响警告。

2014-05-08 10:22:23

Fourinone4.0：一个高性能的数据库引擎CoolHash

如果将操作系统和业务应用之间的软件都统称中间件的话，那么最重要的软件无疑是数据库，它比web应用服务器市场更大，几乎所有的业务系统都需要数据库，所有的企业都会购买数据库。无论是早期的商业智能也好，数据分析挖掘也好，近年的分布式存储也好，大数据也好...围绕数据变着花样的新理念新技术再多，都是“乱花渐欲迷人眼，浅草才能没马蹄”，其实最核心的还是数据库技术。

2014-05-07 14:09:20

数据可视化的秘密和数据绘图的要素

研究数据的方法有很多，比如利用统计方法，计算数据的平均值和标准差；再比如使用模型，拟合数据。数据通常是大量的，人脑难以直接把握其中的信息。研究数据的最终目的是减小海量数据的信息量，将数据中的信息客观的展示出来，并最终整理成简单的，人脑可以掌握的知识。

2014-05-05 10:01:51

数据可视化

对话银行大佬：互联网金融中的大数据作用及影响？

传统商业银行也有广泛使用大数据技术，但对技术的依赖程度是一个值得研究的课题。

2014-05-04 10:08:15

数据收集或比数据挖掘更有意义

按照今天信息技术的发达程度，数据收集看起来很容易。一个摄像头每天收集多少信息？空间跑着那么多卫星，它们每天收集多少信息？好像不用愁没有信息。而数据挖掘要从繁杂的信息中寻找知识，就很困难了。但是，事情可能不是那么简单。在某些情况下，数据收集可能比数据挖掘更难、更有意义。

2014-05-04 10:06:56

零售行业的数据挖掘七步走

本文从个人的角度去谈一下如何使用数据挖掘帮助零售商提升生意，让数据真正地去指导企业经营，最大限度地发挥数据提供商业决策的作用。

2014-04-30 15:20:06

在 Postgres 里克隆一个 MongoDB

Postgres 社区在 NoSQL采取一系列动作后并没有坐以待毙. Postgres一直在进步: 集成了 JSON和 PLV8. PLV8 引入了 V8 Javascript引擎 . 操作 JSON也更简单了 (需要验证).

2014-04-29 15:08:26

Postgres MongoDB

漫谈大数据在O2O领域的应用

在O2O领域，各个移动互联网应用无时无刻不在生产数据，而数据分别存储在各家公司或应用的数据库服务器中，在大数据背景下，单打独斗已无法胜任深度的数据分析与挖掘，传统企业需要的是基于大数据的智能优化与辅助决策。

2014-04-29 14:56:07

数据并非越大越好：谷歌流感趋势错在哪儿了？

大数据为研究人类行为和人与人之间大规模的互动提供了新的方式。然而，由于大数据的搜集做不到像“小数据”那样精确，因此分析解读大数据是一件十分复杂的事。一项发表在《科学》杂志政策论坛上的新研究利用“谷歌流感趋势”（Google Flu Trends，GFT）作为范例，解释了大数据分析为何会背离事实，并提出了大数据时代背景下一些值得思考的事。

2014-04-29 14:52:06

一文读懂大数据：Hadoop，大数据技术及相关应用

你想了解大数据，却对生涩的术语毫不知情？你想了解大数据的市场和应用，却又没有好的案例和解说？

2014-04-29 09:59:44

阿里的野心：大数据搬家记

作为中国最大的电商集团，阿里巴巴一直善于自省自查。大数据革命的旋风吹到中国，让阿里巴巴得以机会发现自己脚下土地的松动。按照“数据基础决定上层建筑”的逻辑，阿里巴巴祭出一系列数据迁移和优化项目——重塑阿里电商生态系统的生命之树正破土生发。然而，“釜底抽薪”般的大动作可是需要拿出十万分的谨慎和耐心。

2014-04-28 11:21:25

当真你就输了？中国式大数据都是骗人的

中国式大数据的核心关键词，除了展示自己的东西如何牛之外，主要是通过数据来影响消费者，达到数据操控和数据干扰的目的。

2014-04-28 11:06:35

中国式大数据

大数据VS小数据：9种数据类型及利用方法

如今，具有压倒性的数据量使得市场营销人员和广告商们已经难以理解哪些信息非常重要，哪些信息是纯粹的噪音，哪些数据是正确的？而哪些数据又是可以信赖的？不同类型的数据具有什么作用，又应该如何被使用？下面笔者根据专注以数据为基础的多渠道营销自动化智能化机构webpower的数据客观可信度排名，给大家介绍9种不同类型的数据，以及它们应该如何被有效使用。

2014-04-25 09:38:08

大数据分析，投资和收益怎么算？

大数据是业务，不是投资项目，它要联系到你的业务上去，比如你怎么获取更多新客户？你的业务怎么更为高效？一旦作为业务项目，你面临的就不是一个科技问题，是企业的一个流程问题。而这样的IT项目会有相应的预算和评估标准。

2014-04-25 09:23:06

详解如何建立面向业务落地的数据分析流程

数据工作者最长也是有效的一种工作方式是带项目，无论是数据分析还是专项挖掘，项目制能使数据尽量贴近业务并且有效理解业务和数据的各个维度。那么如何建立面向业务落地的数据分析（挖掘）流程？

2014-04-24 09:46:47

2014年值得关注的十个Hadoop大数据创业公司

开源大数据框架Apache Hadoop已经成了大数据处理的事实标准，同时也几乎成了大数据的代名词，虽然这多少有些以偏概全。

2014-04-24 09:41:06

思维可视化的四类模型

人的思考过程，是一个奇妙的过程，思维在脑海里流窜，横冲直撞又反复纠缠，最后扭成一团麻。所以常常会有人抱怨，脑袋里很乱，想不出头绪。这是因为，大部分人的思考过程都是杂乱无序的，没有逻辑的，最后也没法形成有效的沉淀，更无法找到清晰的结论。那么本文要讲述的，就是怎样把思维进行可视化的规整，最终系统化的沉淀下来，找到其中有价值的方向。其实这种可视化的规则，不止可以用工作中，用在生活中也一样。

2014-04-23 09:21:38

新浪微博关系服务与Redis的故事

新浪微博的工程师们曾经在多个公开场合都讲到过，微博平台当前在使用并维护着可能是世界上最大的Redis集群，其中最大的一个业务，单个业务使用了超过 10T 的内存，这里说的就是微博关系服务。

2014-04-22 10:34:57

新浪微博 Redis

阿里小贷利用大数据使互联网金融扁平化

站在这个角度，结合大数据对金融服务的改造和局部的颠覆作用，我认为，以阿里小贷为代表的互联网金融业态，正在通过数据化的标准来革新现有的金融服务格局，并让更多的弱势信贷者实现与优势融资方一样的，享受金融服务的权利。简而言之，大数据结合金融，正在让信贷与融资变得智能化\扁平化。

2014-04-22 10:21:54

为什么大数据与传统商业智能有所不同

大数据，这个术语已被过度使用，同样也被过度误解。现在我们陷入了这样一个怪圈：每个人都在谈论这件事，每个人都认为别人在做这件事，所以每个人都说他们正在做这件事。

2014-04-22 10:14:49

大数据五种开源处理技术介绍

大数据领域的处理，我自己本身接触的时间也不长，正式的项目还在开发之中，深受大数据处理方面的吸引，所以也就有写文章的想法的了。大数据以Hadoop以及”NO SQL”为主的Mongo和Cassandra等数据库技术在展现。现在数据的实时分析将可能容易一些。现在集群的转换将越来越可靠,20分钟以内就能够完成。因为我们用表来支持?但是这些是仅仅是一些比较新的，未开发的优点和不平凡的大机会超过了这些常规的猜想。

2014-04-22 09:34:12

不懂大数据也能看明白电商数据分析方法论

说到数据分析，大家可能就会想到回归，聚类什么的，不过对于电商的小伙伴来说，这些都太复杂了。而实际分析的时候，其实并不需要这么复杂的算法。

2014-04-21 10:38:36

从百度视频看大数据与人工智能

大数据的应用决策可以拆解成两种层面，第一种是利用个体数据为个体进行决策，第二种是利用群体数据为群体进行决策。结合的案例，看看大数据与人工智能是具体如何应用的。

2014-04-21 10:25:01

Google Analytics支持单一视图追踪web和应用数据

谷歌的分析工具Google Analytics新推出了一项重要的小幅更新：开发者现在能够获得涵盖web和应用数据的统一报告视图。谷歌表示，这将有助于为用户提供多个数字接触点（web、移动应用和其它设备）的商户更好地理解他们。

2014-04-21 10:04:32

Spark基本概念解析

Spark作为一个资源管理器的存在，类似YARN、Mesos的角色，为Spark Application提供资源。

2014-04-16 15:11:19

Spark多语言编程实践

了解了Spark编程的基本概念，可以看出Spark编程都是围绕着RDD进行的。关于编程的基础知识，可以参看spark编程基础。

2014-04-16 14:50:20

QCon2014演讲预告：大规模运营Redis的经验@京东

在2014年的QCon北京大会，刘海锋将根据他们开发这套系统的经验，分享大规模运营Redis的经验，自研系统的设计思路，以及京东在数据存储方面的技术体系。InfoQ中文站在会前对刘海锋进行了一次采访，邀请他对存储、Redis等方向分享自己的观点。

2014-04-16 14:05:39

Spark的Standalone模式部署

首先，下载并解压缩Spark的源码，切换到解压缩所生成的目录，运行部署包生成程序make-distribution.sh。就可以开始Standalone模式部署过程了。

2014-04-16 14:04:34

Spark Standalone

Spark的YARN模式部署

Spark可以通过SBT（Scala Build Tool）或者Maven来编译，官方提供的二进制安装文件是用Maven编译。

2014-04-16 13:47:43

Spark On Yarn(HDFS HA)详细配置过程

我们将要介绍Spark On Yarn详细配置过程，包括服务器分布以及Spark的部署全部过程。

2014-04-16 11:01:07

Spark集群部署

本文将为您介绍如何在虚拟机环境部署Spark集群。集群上已经成功部署了Hadoop2.2，软件环境为64位Ubuntu12.04 LTS。

2014-04-16 10:41:58

腾讯大数据平台的秘密——多维度交叉分析

腾讯数据平台的思路，早已熟悉，这次算复习，再次感受腾讯数据平台的成长，技术性已经是领先水平，在产品与业务发展的指导与支撑并转化为生产力方面，仍有非常大的想象空间。

2014-04-16 09:15:10

腾讯大数据

大数据基础知识：分布式计算、服务器集群

大数据，官方定义是指那些数据量特别大、数据类别特别复杂的数据集，这种数据集无法用传统的数据库进行存储，管理和处理。大数据的主要特点为数据量大（Volume），数据类别复杂（Variety），数据处理速度快（Velocity）和数据真实性高（Veracity），合起来被称为4V。

2014-04-16 09:12:10

大数据有助于商业银行重获生机

无论采用哪种分析技术，都是服务于银行管理决策的，而做出管理决策的始终应该是人、银行家，而不是机器。

2014-04-15 10:07:22

Cassandra与HBase的大数据对决谁是胜者？

众多基于Bigtable技术的开源项目正在通过不同的方式实现高扩展性、高灵活性、分布式及宽列数据存储等功能，Cassandra和HBase就是其中的代表。

2014-04-15 09:30:08

大数据时代个人信息安全谁来管？不能只是拼人品

以发展促安全，以安全保发展，这对于一个国家和大的组织来说，是值得提倡的。然后对于我们作为被技术影响的个体又将会如何呢？

2014-04-14 15:07:11

上一页 1 ··· 133 134 135 136 137 ··· 325 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营