直播训练营

鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库

1.5w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.5w 条

专访拉手网CTO官冲：电商大数据分析先行原创

信息社会，数据的价值不容置疑，但如何用好这块数据金矿，还有待挖掘。2014年，是大数据进入落地之年。究竟大数据在企业一线会有怎样的应用，51CTO记者带着这样的疑问采访了拉手网CTO官冲先生。

2014-04-09 09:41:14

电商大数据

探讨大数据如何成为安全生产利器

信息化一方面加速了安全生产事故信息传播速度，导致安全生产的被关注度空前高涨，另一方面，也为解决安全生产问题带来了“利器”——大数据。当前，大数据正以惊人的速度渗透到越来越多的领域，电商、零售商、IT企业等应用大数据的成功案例屡见不鲜。大数据在安全生产中的应用，最基本的功能就是从海量的安全生产数据中寻找事故发生的规律、预测未来，从而对症下药，有效遏制事故的发生。同时，大数据在提升安全监管能力和明确安全责任方面也可发挥重要作用。

2014-04-08 10:55:15

还谈论大数据？“小数据”才是教育领域的革新力量

随着大数据的发展，科技产业受到深刻影响，收集和解析数据的能力在近年来突飞猛进，其应用范围深入到生活的方方面面。

2014-04-08 10:50:22

PostgreSQL痛点的解决方案

PostgreSQL是一个很老的系统，可以追溯到1996；它被很多用户在多种操作系统上运行。因此，PostgreSQL开发商被他们可以添加的Linux指定代码的数量所限制。它是基于合作进程的，没使用线程。系统 V 共享内存用于进程间通信。重要的是，PostgreSQL维护它自己的内部缓冲区，但也使用 I/O 缓冲来读写磁盘数据。这种缓冲的组合导致了 PostgreSQL 用户所经历的一些问题。

2014-04-08 09:49:27

PostgreSQL 双缓冲

大数据邮件营销“3大逻辑”

大数据和大逻辑，正在成为我们通向成功的路径。正如在实践邮件营销的道路中，我们的邮件营销生态系统变得更加复杂，我们也开始拥有越来越多具有价值的数据点，那么接下来我们应该往哪里走呢？我认为，接下来我们需要做的是，为复杂的邮件营销生态系统构建一套逻辑运行方式，化繁为简，借助工具，去转化这些潜在价值。那么目前市场环境背景下，邮件营销运作主要遵循哪些大逻辑概念？下面是全球领先的邮件营销服务机构webpower中国区给客户提供的开展邮件营销活动的3个”大逻辑“，现摘录如下，供开展邮件营销活动的企业参考。

2014-04-08 09:36:09

详解大数据的思想形成与价值维度

在漫长的数据蓄水过程中，数学和统计学逐渐发展，人们开始注意对数据的量化分析，在人类进入信息时代以前这样的例子就不胜枚举。

2014-04-04 10:53:04

步入云端：微软发布SQL Server 2014

正如其所承诺的，微软已经向MSDN和TechNet订阅者发布了SQL Server 2014。

2014-04-02 10:23:35

爱奇艺许立剑：分布式计算Mesos框架和应用

爱奇艺高级工程师许立剑分享分布式计算Mesos框架和应用，中科院软件所工程师李明宇分享关于视频编码与存储的设想，与大家共同探讨视频网站背后的技术架构发展。

2014-04-01 15:41:42

爱奇艺 Mesos

移动环境中防止数据丢失的5种方法

企业敏感数据可能会被移动到移动设备，不再受企业网络防御措施的保护。这是否会让你的数据处于危险之中?本文我们将探讨防止移动设备数据丢失的策略。

2014-04-01 11:13:32

机器学习已成为大数据的基石

机器学习可是说是一位无名英雄，它们一直在默默地支持着大量极为复杂的大数据分析应用。

2014-03-31 15:08:23

机器学习大数据

原来是这么玩，解析全球十大电信巨头如何玩大数据

对于电信运营商而言，没有哪一个时代能比肩4G时代，轻松掌握如此海量的客户数据。4G时代，手机购物、视频通话、移动音乐下载、手机游戏、手机IM、移动搜索、移动支付等移动数据业务层出不穷。它们在为用户创造了前所未有的新体验同时，也为电信运营商挖掘用户数据价值提供了大数据的视角。数据挖掘、数据共享、数据分析已经成为全球电信运营商转变商业模式，赢取深度商业洞察力的基本共识。

2014-03-31 14:59:08

当“大数据”落地，当技术接轨商业

从2012年以来，“大数据”持续升温（《纽约时报》就把2012年定义为“大数据的十字路口”），跟着“热闹围观”的还有图书市场。

2014-03-31 14:53:46

MongoDB集群搭建及Sharding的实现思路

选择一个合适索引而减少索引量，这种索引叫做重复索引,能够在索引中直接查找到所有要查询的索引，叫做覆盖索引，能够满足覆盖索引的条件并且排序次序又能够与索引的次序相同，这种次序是"3星"的,所以任何时候创建索引的目的一定要与搜索码完全匹配，至少保持一致.

2014-03-28 09:35:11

MongoDB Sharding

国泰君安建设证券行业内首个大数据中心

继银行、保险行业后，券商也在加快拥抱大数据的步伐。近日，国泰君安启用其在张江的数据中心，成为行业内首家拥有高等级数据中心的券商。记者获悉，位于张江卡园睿翔园二期的国泰君安数据中心，总体建筑面积13957平方米，属于独立运营中心，该券商此前的IT后台等部门将迁入。

2014-03-27 15:35:45

国泰君安大数据

京东王一戎：基于大数据的京东供应链金融

京东金融公共事务部副总监王一戎分享了关于京东在供应链金融方面的发展。

2014-03-27 15:27:12

京东大数据

农行副行长李振江:打造自己的大数据平台

对于市场关注的互联网金融，农业银行副行长李振江在业绩发布会上表示，农行持尊重和欢迎态度，该行也在制定互联网金融的发展蓝图，并已成立了领导小组和推进办公室，要在O2O领域建立移动金融开放平台，打造自己的大数据平台。

2014-03-27 15:24:43

农行大数据

优酷土豆应用Spark完善大数据分析案例

优酷土豆作为国内最大的视频网站，和国内其他互联网巨头一样，率先看到大数据对公司业务的价值，早在2009年就开始使用Hadoop集群，随着这些年业务迅猛发展，优酷土豆又率先尝试了仍处于大数据前沿领域的Spark/Shark 内存计算框架，很好地解决了机器学习和图计算多次迭代的瓶颈问题，使得公司大数据分析更加完善。

2014-03-27 09:36:36

Hive动态分区导致的Jobtracker Hang问题

昨天下午有20多分钟Hadoop平台无法跑Hive，Jobtracker的页面也打不开，hadoop job –list也hang住没有响应，过了10分钟后恢复了，查看gc日志发现Jobtracker没有进行full gc，查看这段时间的Job日志发现一个可疑的Hive SQL: Insert into table t(dt) as select xxx,dt from txx，是一个用了动态分区的查询.这个查询和Jobtracker Hang住有什么关系呢？

2014-03-26 11:15:26

对比Hadoop 分析Spark受多方追捧的原因

作者Mikio Braun是柏林工业大学机器学习专业的博士后，他通过描述了自己对Spark逐步认识的过程，为我们剖析了Spark的原理和应用。

2014-03-26 11:09:27

Apache Spark是大数据领域的下一个大家伙吗？

Spark是一个基于内存in-memory数据处理平台，兼容于Hadoop 数据源但是比Hadoop MapReduce运行得快得多。.特别适合于机器学习处理。

2014-03-26 10:59:14

Apache Spark的R语言前端：SparkR

SparkR是一个R语言包提供了一个轻量级的前端，用于从R语言中使用Apache Spark。SparkR通过RDD类暴露Spark API，允许用户以交互方式在集群上从R shell运行jobs。

2014-03-26 10:52:24

Google的大数据基因组学梦

未来，在 Google 上搜索一个人，将会呈现出一种全新的结果。现在，位于山景城的硅谷巨头 Google 邀请遗传学家将手中的遗传信息上传到该公司开发的云设施上，与此同时， Google 还为科学家提供了如何导入、处理、存储以及搜索 DNA 数据的操作说明。

2014-03-26 09:06:27

Google 大数据

用友UAP曾小青:基于数据挖掘的客户细分方法

企业和商家更加重视客户的消费行为，用友集团UAP中心大数据专家曾小青表示，将消费数据进行挖掘，以此作为客户分类的参考依据，可以更好提高客户满意度，并提供更准确的决策依据。

2014-03-24 11:02:28

同步或异步不同大数据分析的存储选择

目前市场上有两种类型的大数据分析方式——同步的和异步的，两种都有各自在存储容量和特性上的要求。

2014-03-24 10:54:10

大数据分析

”云计算“可作为大数据分析的使能器

大数据的出现使业务智能真正地走入了21世纪。但事实上“大数据”词代表的并不是解决方案，而是一类问题。在这些PB数量级的数据中，隐藏着怎样的价值？我们从中能得什么，并且使之指导业务部署的方方面面。但这一巨大量数据实际上有用的没有多少。所以为了利用其隐藏的价值，企业需要收集、过滤，并通过情感分析应用、定位工具以及其它的技术来分析它，从中产生有用的信息，从而为今后的业务发展服务。

2014-03-21 13:42:37

虚拟运营商颠覆八大行业，大数据起航

19家虚拟运营商牌照，170手机号码，100XX客服号码，运营商高管离职潮等等一系列事件，即将引爆一场中国通信业前有未有的新格局，中国八大行业（新媒体、电子商务、移动游戏、终端渠道、行业应用、云计算、物流、第三方支付等等）在虚拟运营商的到来，快速颠覆着这些行业运营思维，重塑行业商业模式，170手机号码尽情飞舞八大行业。

2014-03-20 14:37:13

虚拟运营商

大数据应用程序最佳选择：是SQL还是NoSQL？

执行大数据[注]项目的企业面对的关键决策之一是使用哪个数据库，SQL还是NoSQL?SQL有着骄人的业绩，庞大的安装基础;而NoSQL正在获得可观的收益，且有很多支持者。我们来看看两位专家对这个问题的看法。

2014-03-20 14:02:17

MapReduce连接：复制连接

复制连接是map端的连接。复制连接得名于它的具体实现：连接中最小的数据集将会被复制到所有的map主机节点。复制连接有一个假设前提：在被连接的数据集中，有一个数据集足够小到可以缓存在内存中。

2014-03-20 09:49:51

气象大数据的商业服务与研究

在过去服务中，气象局提供天气预报，不知道行业怎么用，行业拿了天气预报也不知道应该怎么用，这困扰了气象系统十几年，现在大数据时代来了，终于看到了这个问题改变的希望。

2014-03-19 15:10:43

气象大数据

德国波茨坦借助大数据减少雾霾

汽车尾气排放是造成雾霾的重要原因之一。空气质量差的时候，能否减少汽车的行驶量，以减少空气的“负担”？德国城市波茨坦借助大数据技术已经实现了这个场景。

2014-03-19 10:40:14

治霾治污提速亟须大数据思维

相较于模糊的语言表述,直观的数据显然更具传播优势。但人们对于水污染乃至整个环境状况的知情权与知情欲,显然不止于此。比如,这2.8亿人口如何分布?不安全饮用水到底有多严重?是哪些因素造成?有怎样的具体危害?这些都比一个大数字更“接地气”。而要给出这一类“数字背后的数字”,就必然要牵涉时下一个传播度颇高的概念——“大数据”。

2014-03-19 09:53:38

大数据雾霾

大数据可帮助预测未来40日天气情况

天气是很难预报、无法控制的。但是现在有一家公司试图利用大数据来预测天气。

2014-03-19 09:48:46

国家气象信息中心沈文海:气象大数据如何落地

国家气象信息中心副总工程师沈文海在采访中说，虽然气象部门还没有充分做好迎接大数据浪潮的准备，但是大数据和云计算带来的新的理念和技术架构却会给这个领域的IT建设一种新的思路和方向。

2014-03-19 09:41:47

气象大数据

中国即将引爆气象大数据

世界的本质就是数据，大数据将开启一次重大的时代转型。那么，气象部门怎样迎接大数据时代？气象业务又会发生哪些变革？存在哪些困境？

2014-03-19 09:40:32

大数据气象

Redis超时问题分析汇总

Redis在分布式应用中占据着越来越重要的地位，短短的几万行代码，实现了一个高性能的数据存储服务。最近dump中心的cm8集群出现过几次redis超时的情况，但是查看redis机器的相关内存都没有发现内存不够，或者内存发生交换的情况，查看redis源码之后，发现在某些情况下redis会出现超时的状况，相关细节如下。

2014-03-18 13:27:55

Redis 数据存储

MapReduce连接：重分区连接

连接是关系运算，可以用于合并关系（relation）。对于数据库中的表连接操作，可能已经广为人知了。在MapReduce中，连接可以用于合并两个或多个数据集。例如，用户基本信息和用户活动详情信息。用户基本信息来自于OLTP数据库。用户活动详情信息来自于日志文件。

2014-03-18 10:23:11

SVM的Map-Reduce数据挖掘算法

SVM支持向量机，最近十五年机器学习界的明星算法，学术界也是各种研究，现今已经达到一个瓶颈，屋漏偏逢连夜雨，随着深度学习的雄起，SVM弄的一个人走茶凉的境遇(也许正是90年代神经网络的感受吧，呵呵)，现在讲一讲关于SVM的并行。

2014-03-18 10:16:58

常用MapReduce数据挖掘算法之均值、方差

本文讲讲一些机器学习算法的map-reduce并行策略，尽管有些算法确实不适合map-reduce计算，但是掌握一些并行思想策略总归不是件坏事，大家如果对某个算法有更好的并行策略，也请多多指教，欢迎大家交流，OK，下面先从一个最基本的均值、方差的并行开始。

2014-03-17 15:28:48

动手实战SQL Server死锁

最近的一个项目由于客户明确提出要做下性能压力测试，使用的工具就是VS自带的压力测试工具。以前其它项目做压力测试后反馈的其中一个重要问题就是数据库的死锁。没想到我们这个项目测试时死锁同样的发生了，我之前的项目由于很少参与压力测试，基本上也不会去了解死锁，以及死锁如何解决的问题。

2014-03-17 10:34:48

使用Windows Azure搭建Hadoop集群

本文主要内容是使用Windows Azure的VIRTUAL MACHINES和NETWORKS服务安装CDH (Cloudera Distribution Including Apache Hadoop)搭建Hadoop集群。

2014-03-17 10:05:45

如何协调大数据与隐私

在很多方面，“大数据”和“加密”是对立的，前者收集、存储和分析信息，以此来揭示对学者、法律实施和企业有用的规律；而后者的目标是窥探隐藏的数据。这个议题(tension)是本周的一个由白宫科技政策办公室和麻省理工共同举办的会议的核心，这次会议有来自学术界、政界和商界的许多专家人士出席，他们探讨了加密技术以及其它以隐私为导向的技术，可以保护大数据所涉及的信息。

2014-03-17 09:48:23

企业大数据如何起步：先做好小数据分析

目前国内外关于大数据的谈论很多，大多是谈运营级别的，或者说从服务端、服务方提得较多一些。笔者要跟大家交流的问题是作为各类企业尤其是客户方的企业来说，大数据跟他们有什么关系，或者说作为企业方怎样去参与，这是企业方现在面临的最大问题。

2014-03-17 09:45:04

大数据中非结构化数据的挖掘：文本

非结构化数据是大数据数据多样化的的一个特点，而点击流中的数据是多样化数据的一部分。依托强大的网站分析工具，可以得到最细粒度的原始数据（Raw Data），如果这些原始数据仅仅用来看看报表，那意义太小。非结构化化数据包括文本、视频、文档、音频、甚至地理位置信息等等，本篇介绍的是点击流中的非结构化数据的文本挖掘应用——当然，核心还是如何更好的应用这些非结构化数据。

2014-03-14 09:52:15

非结构化数据

Zabbix企业应用：固定端口监控Redis

本文介绍使用固定端口模式监控redis，先展示效果图，看看是否能满足你的需求，然后再看看具体的监控配置方案。

2014-03-13 14:56:34

Zabbix 端口监控

用过滤器从背景噪音中分离重要大数据信息

大数据已经在媒体和IT企业中大量提及，但是有多少企业真正在使用大数据？又有多少企业从大数据中受益呢？真正使用好大数据是不容易的事情。

2014-03-13 14:17:10

关于用户行为大数据计算

用户行为类数据是最常见的大数据形式，比如电信的通话记录、网站的访问日志、应用商店的app下载记录、银行的账户信息、机顶盒的观看记录、股票的交易记录、保险业的保单信息，连锁超市会员的购物信息、交通违法信息、医疗就诊记录。

2014-03-13 10:45:40

阿里金融大数据授信法：“水文模型”审贷

2月20日，阿里金融旗下的阿里小贷最新数据出炉，2013年阿里小贷全年新增投放贷款1000亿元。截至2014年2月中旬，阿里小贷累计投放贷款超过1700亿元，服务小微企业逾70万家，户均贷款余额不超过4万元，不良率小于1%。

2014-03-12 16:43:50

大数据授信

银行加速布局大数据鏖战金融大数据“霸权”

当阿里金融崛起，腾讯借道微信破局之际，百度也不甘沉寂参与推出理财产品，“三马”联手打造的互联网保险巨头--众安在线保险也即将开业。互联网巨头频频发力，对传统金融巨头而言，是颠覆？融合？还是“鸡蛋碰石头”,最终无力挑战？在竞相追逐互联网金融概念的浮华背后，是否存在隐忧。

2014-03-12 16:38:43

光大银行杨兵兵：大数据改变金融运营模式

光大银行信息科技部总经理杨兵兵表示，大数据改变金融运营模式，以前所谓的定制服务，经常是为了高端客户。但是，现在由于数据的掌握和分析，银行也可以为更多的客户进行定制。

2014-03-12 14:04:59

大数据颠覆传统金融？

2013年是互联网金融元年，互联网技术在金融业的应用犹如在银行主导的传统金融业的死水中投入一颗石子。互联网金融未来发展的一大趋势是大数据的应用，而这也改变了人们对金融本质的传统认识。此前学界广泛认为金融的本质是中介，还有人认为金融的本质是对风险的控制与管理，然而随着互联网金融的发展，已经有人开始对金融进行重新定义，金融就是大数据。

2014-03-12 10:31:32

上一页 1 ··· 129 130 131 132 133 ··· 319 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区

教育

51CTO学堂精培企业培训 CTO训练营