51CTO首页
内容精选
博客
学堂
精培
企业培训
CTO训练营
鸿蒙开发者社区
WOT全球技术创新大会
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
精品班厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
CTO训练营技术经理研习营LeaTech峰会
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

大数据

8596内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8596 条
阿里5位嘉宾3个分享：HBaseCon Asia 2017干货满满 原创
秉承开源和分享的精神，阿里把HBase的实践经验和改进不断回馈HBase社区，比如说Bucket Cache和Reverse Scan等功能，给HBase技术发展带来了非常深远的影响。同时，也给HBase社区培养了2名PMC和2名Committer，阿里在HBase社区的影响力可见一斑。那么这次HBaseCon 2017 Asia。阿里派出了一位HBase PMC和2位Committer，还有两位资深的HBase开发，给大家带来了十足的干货。

2017-08-09 13:25:20

阿里Asia
导致大数据项目失败的4大痛点及应对策略
大数据项目通常不会因为单一的原因而失败，而且肯定不会仅仅出于技术原因。这些因素的组合有助于破坏大数据部署。业务战略、人员、企业文化、分析方法或分析工具的细微差别等因素，都可能导致大数据项目出现问题和失败，而这样的失败在数字化转型的过程中在所难免。

2017-08-09 10:50:11

大数据失败策略
华为服务器助力全球最大私有Hadoop集群发力大数据
FusionServer硬盘驱动器密度最高且可节能20% 经过几个月的使用和评估，我们决定将华为的FusionServer纳入我们全球采购目录，让华为成为我们的一个主要硬件供应商。所以自2016年初以来，我们在美国，欧洲和亚太地区持续采购华为服务器……华为提供构建强大数据中心所需的全系列产品。我们可以从一个供应商处购买到模块化集装箱、服务器和网络交换机，这一点对我们来说非常有吸引力。 ——Matthieu BlumbergCriteo基础设施业务工程总监

2017-08-08 16:39:49

华为
中国首届区块链极客高峰论坛在京举办 原创
近日，我国首届区块链极客高峰论坛在在京举行。论坛力邀CSDN副总裁孟岩、亿书创始人朱志文、PPkPub开放小组发起人陈晖、阿希链创始人单青峰等业界技术大咖，从版权保护、物联网、数字资产、人才培养等方面分享总结了目前各自的成果。

2017-08-08 15:45:39

区块链极客首届
实现数据科学研究结果可复制的十条规则
所有的数据科学都是研究。仅仅因为研究结果没有发表在学术论文中，这不会改变我们试图从庞杂数据中获取洞见的事实。因此，对于任何从事内部分析的数据科学家来说，那篇论文中的十条规则都应该引起重视。

2017-08-08 12:26:39

大数据数据科学规则
为什么R语言是学习数据分析的第一选择
专注于一种编程语言的原因是，你需要更多地关注过程和技术，而不是语法。你需要掌握如何通过数据科学工具来分析数据，以及如何解决问题。事实证明，R语言是最佳的选择。

2017-08-08 10:55:03

大数据R语言数据分析
详谈数据科学与大数据技术专业
从IT时代进入DT时代，高校在大数据方向上设置了哪些专业，具体学什么，就业怎么样，作为新兴专业，考生如何报考?人才培养目标：以大数据为核心研究对象，利用大数据的方法解决具体行业应用问题。

2017-08-08 09:48:41

数据科学技术
冲击百万年薪：11大编程语言薪资排行榜，再不学Python就晚了！
编程语言有很多，但并非每一种的需求或工资都相同。人工智能和机器学习走热，让 Python 从众多编程语言中脱颖而出。本文将综合各种信源，比较不同编程语言在美国市场的相关薪资水平、人气和前景，为你提供一些参考。

2017-08-07 19:04:52

大数据编程语言薪资排行
横向对比三大分布式机器学习平台：Spark、PMLS、TensorFlow
分布式机器学习是机器学习领域的一大主要研究方向，我们对分布式机器学习平台的三大基本设计方法进行了简要介绍并举例进行了说明。

2017-08-07 11:02:28

机器学习分布式Spark
给Web开发人员推荐的开源图形库——数据可视化
以下是为 Web 开发者推荐的一些精品开源图形库，旨在专注于最常见的问题和最常用的东西。将针对动画(Animation)、数据可视化(Data Visualization)、2D/3D 分别整理。

2017-08-07 08:47:31

开源图形库数据可视化
TiSpark (Beta) 用户指南
TiSpark 是 PingCAP 推出的为了解决用户复杂 OLAP 需求的产品。本文简单介绍如何部署和使用 TiSpark。本文假设你对 Spark 有基本认知。

2017-08-05 16:31:51

TiDBTiSpark数据库
伪数据科学家 VS 真数据科学家
数据科学家在商业分析、统计学和计算机科学等领域也是通才，比如会掌握这些专业知识：健壮性、实验设计、算法复杂度、仪表盘和数据可视化。一些数据科学家也是数据策略师——他们可以开发数据收集策略，并使用数据来发现可操作的、能对商业产生影响的见解。这就要求数据科学家具有创造性，能根据业务要求，制定分析、提出解决方案。

2017-08-04 15:53:10

大数据真伪数据科学家
快速入门 | 一篇文章带你掌握数据可视化方法
数据可视化主要旨在借助于图形化手段，清晰有效地传达与沟通信息(来源于百度百科)。也就是说可视化的存在是为了帮助我们更好地去传递信息。

2017-08-04 15:33:33

大数据数据可视化方法
微信支付宝无现金之争：瞄准用户支付大数据
八月，支付宝和微信支付在线下又开启了新一轮的抢夺。双方先后宣布，开启无现金月和无现金周活动。支付宝的活动从8月1日持续到8月8日，活动将有超过1000万线下商家参与;微信支付的活动则持续1个月，与商家联动发起补贴，遍及全行业线下商户。

2017-08-04 15:16:55

大数据动向用户支付
解读00后的移动互联网江湖
本文将从00后生活、学习、娱乐方方面面的移动数据，来解读移动互联网江湖的未来格局和营销市场的新走向，本文00后指10-17岁的用户。

2017-08-04 15:00:59

大数据移动互联网数据分析
Spark学习之RDD简单算子
Spark学习之RDD简单算子希望给大家带来一些帮助。

2017-08-04 10:58:55

RDDSpark算子
数据分析报告怎么用？
本文是作者基于自身多年数据分析的经验，总结的一体化数据分析框架，简单地介绍下数据分析能分析能落地的几点。

2017-08-03 15:20:19

大数据数据分析
SMP、NUMA、MPP体系结构介绍
从系统架构来看，目前的商用服务器大体可以分为三类，即对称多处理器结构 (SMP ： Symmetric Multi-Processor) ，非一致存储访问结构 (NUMA ： Non-Uniform Memory Access) ，以及海量并行处理结构 (MPP ： Massive Parallel Processing) 。

2017-08-03 14:01:07

大数据深度学习体系结构
HADOOP1.X中HDFS工作原理
HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS(Google File System)Google 文件系统(中文，英文)。

2017-08-03 10:38:32

HADOOP1.XHDFSHadoop
SparkStreaming与Kafka整合遇到的问题及解决方案
最近工作中是做日志分析的平台，采用了sparkstreaming+kafka，采用kafka主要是看中了它对大数据量处理的高性能，处理日志类应用再好不过了，采用了sparkstreaming的流处理框架 主要是考虑到它本身是基于spark核心的，以后的批处理可以一站式服务，并且可以提供准实时服务到elasticsearch中，可以实现准实时定位系统日志。

2017-08-03 09:37:35

SparkStreamKafkaDirect
使用数据进行决策时要避免3个陷阱
如今，数据不仅仅是营销领域的一个流行语。为了实现业务运作良好，企业需要关注如何改进，有效收集和分析数据。然而，在解释和使用数据来做出决策时也存在一些问题。它不像看起来那么简单，而且有一些陷阱需要避免。

2017-08-02 16:47:43

数据数据收集数据分析
数据变现难题，“七宗罪”待解
我们可以通过数据了解一些截然不同的东西，但遗憾的是，很少有公司能真正利用数据创造价值。难点何在?究其原因，是人们在大数据处理和应用方面，常常会跌入一些错误的逻辑中去。

2017-08-02 16:24:04

数据大数据数据变现
克服大数据集群的挑战
自从大数据的概念诞生以来，集群一直是一个挑战。集群化使得大数据分析更容易。然而，集群也给数据工程师带来了必须解决的问题。

2017-08-02 14:31:58

大数据集群数据存储
大数据技术：内包还是外包
对于零售商来说，大数据是一把双刃剑。这些公司正在努力探索全方位的市场竞争，因为他们试图抵御像亚马逊公司这样的行业巨头，一些公司正在将大量资源部署到开发自己的大数据解决方案中，以试图与零售巨头进行竞争。

2017-08-02 08:56:43

大数据技术SaaS
使用Python + OpenCV来实现脸部和眼睛的检测
本篇文章使用Python和OpenCV中的Haar特征分类器对人脸及眼睛进行检测和追踪。

2017-08-02 07:36:06

大数据PythonOpenCV
四种类型的数据分析模式
在这篇文章中，我们聚焦于在数据科学领域所遇到的四种类型的数据分析模式：描述型、诊断型、预测型和指导型。

2017-08-01 23:44:25

数据分析数据科学数据
掌握这五大技能，你也可以去应聘数据分析师
数据分析的目的是把隐没在一大批看来杂乱无章的数据中的信息集中、萃取和提炼出来，以找出所研究对象的内在规律。几年前, 数据分析还是一个比较鲜见的职业。而今天，无论各行各业，它无处不在的闪烁着耀人的光芒。那么做数据分析需要掌握哪些技能呢?

2017-08-01 20:50:45

大数据数据分析技能
产品经理必会的10种数据分析方法
本文将为产品经理介绍数据分析的基本思路，并基于此，衍生出 2 个常见方法和 7 个应用手段，希望在数据分析的实际应用中能给大家带来帮助。

2017-08-01 16:42:09

数据分析互联网
如何让隐藏在大数据背后的价值发挥出来？
如今，信息每天都在以爆炸式的速度增长，其复杂性也越来越高，当人类的认知能力受到传统可视化形式的限制时，隐藏在大数据背后的价值就难以发挥出来。理解大数据并借助其做出决策，才能发挥它的巨大价值和无限潜力。

2017-08-01 16:37:18

大数据可视化数据
数据有限时怎样调优深度学习模型
所谓迁移学习，就是将一个问题上训练好的模型通过简单的调整，使其适用一个新的问题，可以认为是一种模型调优的“取巧”方法。可以类比人的举一反三能力。

2017-08-01 16:01:44

迁移学习深度学习数据
量子纠缠：从量子物质态到深度学习
本文介绍的就是将机器学习方法应用于量子多体问题这一方向上新涌现出的一个研究思路：从量子纠缠的视角审视深度学习，从而反馈机器学习的发展。

2017-08-01 15:39:34

量子深度学习机器学习
人工智能、大数据与深度学习之间的关系和差异
通过对数据科学领域的几个重要概念间关系的分析，来解释数据科学中遇到的困惑。我们将会看到的，远不是金科玉律的具体概念，难免不同看法; 这只是一种参考意见。

2017-08-01 14:51:45

人工智能大数据深度学习
学习数据分析的“里程碑”是什么？
数据分析是一项综合技术。它既包含hardcore的编程技术，也包含诸多分析逻辑的软知识。

2017-08-01 10:15:56

数据分析大数据
手把手教学：使用Elastic search和Kibana进行数据探索（Python语言）
探索性数据分析(EDA)帮助我们认识底层的数据基结构及其动力学，以此来最大限度发掘出数据的可能性。EDA是提取重要变量和检测异常值的关键。尽管存在着很多种机器学习算法，但EDA仍被视为理解和推动业务的最关键算法之一。

2017-07-31 09:20:52

Elastic seaKibana数据
数据可视化专家的七个秘密
数据可视化的道路上充满了不可见的陷阱和迷宫，最近ClearStory Data的两位数据可视化开发人员分享了他们总结出来的数据可视化开发的7个不宣之秘，普通开发者了解这些方法能提升视野，少走弯路。

2017-07-28 14:43:49

大数据数据可视化秘密
思科 Cisco Spark Room Kit在大中华区成功落地 思科协作助力雅清达携手3W COFFICE打造高效协作共享空间
思科协作Cisco Spark Room Kit系列新产品自2017年6月份在大中华区推出以来，凭借领先的技术优势，在市场上引起了强烈反响。近日，思科合作伙伴广州雅清达智能系统有限公司(以下简称雅清达)宣布将为3W集团旗下的3W COFFICE(共享办公空间)提供思科最新视频协作解决方案，这也标志着思科Cisco Spark Room Kit在大中华区成功落地。

2017-07-28 13:14:45

思科协作
超实用！四个方法帮你搞定数据可视化界面设计
“仪表板”、“大数据”、“数据可视化”、“数据分析”——越来越多人和企业，开始运用他们的数据来做一些有趣的事情。在我的职业生涯中，有幸参与一大批数据为重的界面设计，我要在此分享一些观点，讲讲如何造就这种特殊且有意义的产品。

2017-07-28 11:14:46

数据可视化界面设计
如何用TensorFlow生成令人惊艳的分形图案
今天来介绍一个小项目：在TensorFlow中生成分形图案。分形本身只是一个数学概念，与机器学习并无太大关系，但是通过分形的生成，我们可以了解怎么在TensorFlow中进行数学计算，以及如何进行基本的流程控制，是学习TensorFlow的一个非常好的练手项目。

2017-07-28 10:45:20

大数据TensorFlow分形图案
一文看懂HIVE和HBASE的区别
Apache HBase是一种Key/Value系统，它运行在HDFS之上。和Hive不一样，Hbase的能够在它的数据库上实时运行，而不是运行MapReduce任务。Hive被分区为表格，表格又被进一步分割为列簇。

2017-07-28 09:11:14

HIVEHBASE区别
天马股份：为企业赋能，让商业更简单 原创
Gartner分析表明，全球85%的财富500强企业将通过运用大数据获取竞争优势，到2016年30%的业务直接或间接来自于数据变现或信息产品创新。大数据应用从大型企业开始，正在成为中小企业的标配，中国大数据市场的增长率超过30%。

2017-07-27 20:43:50

赋能商业智能
浅谈分布式消息技术Kafka
Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统(也可以当做MQ系统)，常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。

2017-07-27 14:32:05

大数据分布式消息Kafka
大数据对六大领域的挑战
在互联网时代，创新使得财富积累的速度前所未有的快，贫富不均也会前所未有地分化。这个时代，越聪明越容易成功，越不聪明越不容易成功。世界的竞争变成人与人的竞争，人与人的竞争就是智慧的竞争，就是人的创新能力的竞争。如何才能提高人的竞争力，是管理科学面临的新课题，是管理者必须要思考的难题。

2017-07-27 14:18:41

大数据挑战动向
数据分析的四种类型模式
在这篇博文中，我们聚焦于在数据科学领域所遇到的四种类型的数据分析模式：描述型、诊断型、预测型和指导型。

2017-07-27 14:01:51

大数据数据分析类型模式
高效使用 Python 可视化工具 Matplotlib
Matplotlib是Python中最常用的可视化工具之一,可以非常方便地创建海量类型的2D图表和一些基本的3D图表。本文主要介绍了在学习Matplotlib时面临的一些挑战，为什么要使用Matplotlib，并推荐了一个学习使用Matplotlib的步骤。

2017-07-27 09:49:37

Python工具Matplotlib
与百城达合作 高德地图为“互联网+交通”加速 原创
近日举办的“互联网+城市交通管理创新”论坛上，高德地图宣布已与国内超过100个城市达成战略合作，凭借多元大数据的综合优势，以“用户、应用、汽车、交警”四大行业标配的服务能力，高德逐渐成长为城市智慧交通建设的战略践行者。

2017-07-26 18:55:17

百城高德地图互联网+交通
9个更佳的大数据处理编程语言
大数据的浪潮仍在继续。它渗透到了几乎所有的行业，信息像洪水一样地席卷企业，使得软件越发庞然大物，比如Excel看上去就变得越来越笨拙。数据处理不再无足轻重，并且对精密分析和强大又实时处理的需要变得前所未有的巨大。

2017-07-26 17:45:05

大数据编程语言R语言
如何选择Spark机器学习API
本文将简要介绍Spark机器学习库(Spark MLlib’s APIs)的各种机器学习算法，主要包括：统计算法、分类算法、聚类算法和协同过滤算法，以及各种算法的应用。

2017-07-26 17:25:22

机器学习SparkAPI
浅谈分布式事务
现今互联网界，分布式系统和微服务架构盛行。一个简单操作，在服务端非常可能是由多个服务和数据库实例协同完成的。在一致性要求较高的场景下，多个独立操作之间的一致性问题显得格外棘手。基于水平扩容能力和成本考虑，传统的强一致的解决方案(e.g.单机事务)纷纷被抛弃。其理论依据就是响当当的CAP原理。往往为了可用性和分区容错性，忍痛放弃强一致支持，转而追求最终一致性。

2017-07-26 15:08:05

大数据分布式事务
亮出“安全智能”牌 瀚思B轮融资再受关注 原创
近日，瀚思科技宣布完成B轮融资，金额高达1亿元人民币，被称为2017年上半年中国安全领域企业公开披露的最高融资金额。本轮融资由国科嘉和基金和IDG资本领投，南京高科等A轮投资方继续跟投，凡卓资本担任本次融资独家财务顾问。

2017-07-25 19:48:22

融资智能安全瀚思
基于R shinydashboard的道路交通可视化案例
个作品刚刚获得“中国电科杯”城市数据创新大赛的城市交通专项奖，现在作为案例分享出来供同行交流讨论。虚的就不说了，此文只讨论技术。

2017-07-25 14:50:50

Rshinydashbo可视化
上一页 1 ··· 104105106107108 ··· 172
点赞

51CTO技术栈公众号

业务
速览
在线客服