51CTO首页
内容精选
博客
学堂
精培
企业培训
CTO训练营
智能汽车
开源基础软件社区
WOT全球技术创新大会
公众号矩阵
移动端
免费课程课程排行直播课软考学堂
精品班厂商认证IT技术2022年软考PMP项目管理
在线学习企业服务
CTO训练营技术经理研习营LeaTech峰会
文章资源问答开源课堂专栏直播
51CTO
开源基础软件社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
开源基础软件社区订阅号
51CTO学堂APP
51CTO学堂企业版APP
开源基础软件社区视频号
账号设置 退出

大数据

8132内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8132 条
Hadoop将死？Cloudera CEO怒怼Gartner
大数据已经过了炒作阶段，但即使是现在，提到大数据很多人首先会想到hadoop，但最近多份分析报告和趋势预测的文章所传递出的声音，让Hadoop再度成为了争议的焦点。年初的调查，Hadoop被列为2018年大数据领域的“渐冻”趋势之一，不少人将Hadoop称作“倒下的大象”，比如Lucidworks首席执行官Will Hayes。

2018-04-08 15:32:47

Hadoop大数据Gartner
精英数据科学家应该具备这些能力和特质
成为数据科学家需要具备哪些条件呢?下面就是我们根据IT领导者、行业分析师、数据科学家的看法，总结出的一些重要属性和技能。

2018-04-08 14:50:31

数据科学家企业技能
数据的本质和核心是什么？
几千年来，人类习惯了生存在信息稀缺的年代，大数据与人工智能则为人们带来了曙光，同时也引发了担忧。暂且撇开我们会不会被机器人侵略这个问题，人类真的已经充分利用了自己的潜能了吗?数据是一种信仰, 我们应该善用这个宝藏, 为人类创造更美好的世界。

2018-04-04 14:29:33

大数据人工智能数据
Hadoop中理论与工程的错位
Hadoop是当前重要的大数据计算平台，它试图摒弃传统数据库的理念，重新构建一套新的大数据体系。但是，这并不是件很容易的事，在Hadoop的设计和实现中能看到一些先天不足的地方，其中一点就是把理论问题和工程问题给搞拧了。

2018-04-04 13:24:08

HadoopMapReduce大数据
航空大数据告诉你如何挑选航班
提到“航班”一词，首先会想到的便是航班延误，航班准点率是影响旅客舒适度评价的重要标准。与此同时，越来越多的旅客也渐渐开始关注航空出行的时间、机型、座位、航司服务等指标。本期汪瑞，他将从航班延误、座椅舒适度、接机时间等方面出发，分享航班挑选的秘密。

2018-04-04 12:54:51

航空大数据航班延误
大数据和Hadoop的培训计划能产生多大的影响?
大数据通常被描述为大量的数据。然而，数据量实际上并不重要，而是可以在数据上执行的分析，以便做出更好的决定和其他商业活动。Hadoop是另一种为大数据更好地处理而开发的技术。由于Hadoop开发人员能够以更好的方式执行分析，因此企业对Hadoop开发人员的需求也正在增长。

2018-04-03 14:32:00

大数据Hadoop课程
结构化数据 vs. 非结构化数据
结构化数据 vs. 非结构化数据：结构化数据由明确定义的数据类型组成，其模式可以使其易于搜索。而非结构化数据通常由不容易搜索的数据组成，其中包括音频、视频和社交媒体发布等格式。

2018-04-03 14:00:03

结构化数据非结构化数据数据库
一文读懂征信“大数据”
征信机构在积累征信数据的同时，也需要提升自身的数据存储能力，丰富所积累数据的维度，提升数据分析挖掘、处理速度等各方面能力，从而促进征信业向一个崭新的数字化时代迈进——大数据征信时代。

2018-04-03 13:08:31

大数据征信信用
使用Pandas&NumPy进行数据清洗的6大常用方法
数据科学家花了大量的时间清洗数据集，并将这些数据转换为他们可以处理的格式。事实上，很多数据科学家声称开始获取和清洗数据的工作量要占整个工作的80%。

2018-04-03 12:07:53

数据清洗PandasNumpy
Hadoop分布式存储与传统SQL存储比较及存储操作描述
Google 为了应对快速增长的数据处理，开发了一套算法。后来有人根据算法的思想，开发出开源的软件框架 ，就是Hadoop， 随着越来越多的组织和个人开发者在框架开发中不断贡献改进，Hadoop 已经形成一套家族产品，成为当下最成功最流行的分布式大数据处理框架。

2018-04-03 09:07:07

Hadoop存储SQL存储
纯技术之间的争夺 大数据会被区块链摧毁吗
你随便搜索一下“大数据 区块链”会发现，大数据与区块链的结合几乎是所有人都看好的。笔者并不反对这个观点，但如果从当下来看，大数据与区块链之间仍然存在着一些分歧，而这些分歧从某种意义上让大数据与区块链处在了对立的位置。

2018-04-02 13:56:56

大数据区块链隐私
“数据引导你的行为”：大数据背后的权力与不公
国内有网友发现，同样的商品或服务，老客户看到的价格反而比新客户要贵出许多，在机票、酒店、电影、电商、出行等多个价格有波动的平台都存在类似情况。这在互联网行业被称作“大数据杀熟”。

2018-04-02 13:42:36

大数据数据泄露监管
大数据是什么？怎么学？这里有答案
大数据，又称巨量资料，指的是所涉及的数据资料量规模巨大到无法通过人脑甚至主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。

2018-04-02 11:22:31

大数据Hadoop数据处理
为什么你的大数据项目瞬间就”凉”了？
企业正努力在产品中部署大数据，这一点是毋庸置疑的。但是，根据Gartner在2016年下半年发布的新闻稿：只有15%的企业将其大数据项目部署到生产中。“Gartner在选词时非常谨慎，这并不意味着剩下的企业没有实践，或者数据科学家没有发现使用大数据技术的优势，只是剩下的85%的项目并没有真正投入生产。

2018-04-02 10:58:28

大数据sqoop大数据项目
让每一次出行都更加温暖—高德推出顺风车业务 原创
对此，高德推出了公益顺风车业务，成都、武汉两地率先上线，同时开启北京、上海、广州、深圳、杭州等城市的车主招募，之后将逐步扩展到全国更多城市，高德希望做真的公益和真的顺风车。

2018-03-30 14:40:47

高德公益顺风车
一条数据的HBase之旅，简明HBase入门教程-开篇
本文将以一条数据在HBase中的“旅程”为线索，介绍HBase的核心概念与流程，几乎每一部分都可以展开成一篇独立的长文，但本文旨在让读者能够快速的了解HBase的架构轮廓，所以很多特性/流程被被一言带过，但这些特性在社区中往往经历了漫长的开发过程。

2018-03-30 09:42:05

数据库HBaseNoSQL
本周六与京东、微博、华为等实战专家与你共同探讨容器技术实践！

2018-03-30 09:30:58

TechNeo／沙龙／
Web 开发员 vs 数据科学家：谁将统治 Python？
2017 年末，Python 软件基金会与 JetBrains 一起开展了 Python 开发人员调查，目标是确定最新趋势，并深入了解 Python 在开发界的使用情况。

2018-03-30 08:58:34

Web 开发Python
大数据杀熟？揭秘争议背后的真问题
虽然许多平台都否认自己利用大数据“杀熟”，但此类事件的吐槽和爆料总在发生。普通消费者关心的是，这类情况是否是业内普遍现象?是否利用了用户的个人隐私数据?

2018-03-29 16:05:23

大数据杀熟运营商
数据管理和分析趋势正在改变世界
现在的数据世界正在发生什么，它将如何影响2018年的市场?比如这些头条新闻:人工智能无处不在，并将改变一切;企业继续将他们的基础设施和数据转移到云端;GDPR将使数据保护成为每个公司的首要任务。你知道这些，但也许会对这种夸大其词的说法有点怀疑。

2018-03-29 15:02:58

数据湖数据分层数据治理
318所高校开设数据科学与大数据技术专业，未来前景怎么样？
近日，教育部公布了《2017年度普通高等学校本科专业备案和审批结果》，共有862所高校新增了2311个专业。其中，最热专业当属“数据科学与大数据技术”，共有248所高校，占比超过1/3。

2018-03-29 11:58:11

数据科学大数据教育
人工智能与大数据开发的12个注意点
人工智能是近年来科技发展的重要方向，在大数据时代，对数据采集、挖掘、应用的技术越来越受到瞩目。在人工智能和大数据的开发过程中，有哪些特别需要注意的要点?

2018-03-29 11:11:32

人工智能大数据开发
正确看待大数据的另一面
媒体调查显示，这种根据用户的消费习惯提供“针对性”价格服务的现象，涉及打车、购票、订房、订餐等各种常见的网络平台消费。这就是大数据的另一面。

2018-03-28 15:00:35

大数据互联网隐私
使用大数据最大限度地减少用户生成内容的风险
在过去几年中，用户生成的内容对企业的营销人员来说是一个福音。研究发现，消费者对用户生成内容的反应比对企业创建的内容反应还要好。这是为什么?第三方信誉。企业可以通过获得第三方信誉更好地向客户销售产品。

2018-03-28 14:48:25

大数据风险用户
数据分析师必知必会的7款Python工具
我咨询了我们真正的数据专家，收集整理了他们认为所有数据专家都应该会的七款Python工具。The Galvanize Data Science 和 GalvanizeU 课程注重让学生们花大量的时间沉浸在这些技术里。当你找第一份工作的时候，你曾经投入的时间而获得的对工具的深入理解将会使你有更大的优势。

2018-03-28 14:33:33

数据分析师工具Spark
高德地图“零佣金 不营利” 上线公益顺风车
3月27日消息，高德地图今日宣布推出顺风车业务，成都、武汉两地率先上线，同时开启北京、上海、广州、深圳、杭州等城市的车主招募，之后将逐步扩展到全国更多城市。

2018-03-27 18:00:13

高德顺风车公益
把扎克伯格拉下水，大数据挖掘犯错了吗
“没有行业规范，基本上靠自觉，两家公司自己商量。”岑义涛说，无法无规的基础上，以个人用户信息安全为“标的物”的协议或合同，可能并不会将个人视为拥有数据归属权和使用权的主体，而且被违规利用的情况很难被发现。

2018-03-27 11:28:45

大数据隐私数据安全
数据科学家必备的10种机器学习算法
没有人能否认这样的事实：作为数据科学家的实践者，我们必须了解一些通用机器学习的基础知识算法，这将帮助我们解决所遇到的新领域问题。本文对通用机器学习算法进行了简要的阐述，并列举了它们的相关资源，从而帮助你能够快速掌握其中的奥妙。

2018-03-27 11:02:55

机器学习算法数据科学家
20个顶级大数据软件应用程序
对于大数据软件而言，成功的关键是为企业提供基础应用程序和工具来构建自定义应用程序。以下是20家专门从事大数据构建或相关业务的企业所提供的应用程序。

2018-03-27 10:13:26

大数据软件应用程序
平均年薪35W，2018年大数据AI发展趋势分析
据《大数据人才报告》显示，目前全国的大数据人才仅46万，未来3-5年内大数据人才的缺口将高达150万，可又有多少人知道大数据的价值呢？

2018-03-27 09:11:02

程序员AI大数据
AI、IoT再火，仍然离不开大数据分析
展望未来，Wikibon预测2027年整体大数据分析市场的年增长率将以11%的速度增长，全球将达1030亿美元。其主要市场来源于物联网、移动端和边缘计算等中采用大数据分析技术。

2018-03-26 14:02:53

大数据分析公有云Wikibon
构建云时代数据湖 华为云发布全新一代对象存储服务OBS 3.0
近日，在2018华为中国区生态伙伴大会——“华为云基础设施服务：稳定极速，为企而生”分论坛期间，华为云发布了其全新一代对象存储服务OBS 3.0。

2018-03-26 13:29:13

华为云
现代版“围城”：互联网大数据下的“洗脑”
互联网自发明以来，逐步成为我们生命中不可或缺的一部分。不论是工作还是娱乐，都能在互联网中寻找到自己需要的一切。甚至在网络上，每个人都能找到许多志同道合的人，这些人组成了一个又一个圈子，而这些圈子，成为了现代的“围城”。

2018-03-26 10:19:09

互联网大数据网络
精准“杀熟”！这些事，你可能遇到过却不知道
都说老顾客很重要，不过这两天互联网厂商“大数据杀熟”的新闻，却引来网友的一片热议……

2018-03-26 09:39:06

大数据IT互联网
关于大数据，这里有10个预测
到了2020年，世界上每个人每秒将创造7 MB的数据。在过去的几年里，我们已经创造了比人类历史上更多的数据。大数据席卷全球，并且没有放缓的迹象。人们可能会想，“大数据产业从哪里开始 ”以下有10个大数据预测可以回答这个有趣的问题。

2018-03-25 09:11:31

大数据机器学习分析软件
5种使用Python代码轻松实现数据可视化的方法
数据可视化是数据科学家工作中的重要组成部分。在项目的早期阶段，你通常会进行探索性数据分析(Exploratory Data Analysis，EDA)以获取对数据的一些理解。创建可视化方法确实有助于使事情变得更加清晰易懂，特别是对于大型、高维数据集。

2018-03-24 21:38:54

Python数据库数据可视化
人工智能产业快速发展，2020年规模将破1600亿
22日从“2018中国IT市场年会”现场获悉，2017年中国人工智能核心产业规模超过700亿元，随着国家规划的出台，各地人工智能相关建设将逐步启动，预计到2020年，中国人工智能核心产业规模将超过1600亿元，增长率达到26.2%。

2018-03-23 21:02:59

人工智能机器人大数据
泄露5000万用户数据，何以成脸书灭顶之灾？
大数据本身并不中立，它反映的是人类真实的社会。一个并不真正平等、存在偏见和歧视的不完美社会，必然导致不完美的大数据分析结果。

2018-03-23 12:13:38

数据泄露大数据Facebook
第47期：Hadoop - 一把杀鸡用的牛刀
Hadoop的产品线丰富，这本来是好事情，但要把这些模块都放在一个平台上运行，还要梳理好各个模块之间的相互依赖性，就需要一个包罗万象的复杂框架，这也使得Hadoop体系显得很沉重。

2018-03-23 08:26:44

Hadoop集群SQL
关于大数据你应该了解的五件事儿
随着科技的发展，目前已经步入了大数据的时代，很多社交媒体和互联网公司也非常关注大数据这一行业。那么对于大数据而言，这里有五件事情是你应该了解的。

2018-03-22 16:32:49

大数据数据集数据处理
2017乘用车大数据分析：高学历的年轻人最关注
据中国汽车工业协会统计分析，2017 年，全年汽车产销 2901.5 万辆和 2887.9 万辆，连续九年蝉联全球第一，行业经济效益增速明显高于产销量增速。而在所有的数据中，新能源汽车数据涨幅惊人，或成未来主流发展趋势。

2018-03-22 16:01:48

数据分析新能源汽车汽车
托马斯·达文波特畅想的四种大数据创新应用场景
琳达·彼得斯(Lynda Peters)是保险公司Tranquilife 的一名IT 设计师，她将参加一次业务会议，会议主题是：真正的大数据和它对保险业的影响。这是一个热门话题，她差点没能获准参加，因为Tranquilife 的员工活动系统显示，已经有另外6 名员工报名参加了。

2018-03-22 15:36:10

大数据智能程序
企业在采用大数据之前需加强网络安全
企业可以承担网络宕机导致的数百万美元的损失吗?企业有多少客户愿意采用其竞争对手的服务?网络中断听起来很糟糕，但是当大数据浪潮冲击一些企业的业务，就会庆幸加强了自己的网络安全。

2018-03-22 15:07:41

大数据网络安全服务提供商
思科Spark Room 70搭载全球首款基于AI的会议语音助手，全新登场
思科作为在会议领域中推进人工智能应用的思想领袖和技术先驱，自上世纪90年代至今，在AI发展的每个阶段中，始终以行业领导者的姿态推动AI创新与发展。

2018-03-22 14:44:48

思科
不踩坑的Python爬虫：如何在一个月内学会爬取大规模数据
如果你仔细观察，就不难发现，懂爬虫、学习爬虫的人越来越多，一方面，互联网可以获取的数据越来越多，另一方面，像 Python这样的编程语言提供越来越多的优秀工具，让爬虫变得简单、容易上手。

2018-03-22 11:38:18

Python爬虫学习
WOT＋英雄汇，2018技术人不可缺席的盛宴
技术圈各种大会小会， 这个大会凭什么吸引你？

2018-03-22 11:32:24

WOT
规避FB数据危机，详解银监会数据治理指引落地路线
的确，数据安全问题早已不是第一天被提到，Facebook数据危机也只是揭开了数据资产管理安全问题的冰山一角(社交、医疗、幼教、通信等行业也时有发生)。如何规避Facebook这种数据危机、做好数据安全管理?

2018-03-22 10:59:51

数据治理银监会数据安全
Spark核心技术原理透视一（Spark运行原理）
在大数据领域，只有深挖数据科学领域，走在学术前沿，才能在底层算法和模型方面走在前面，从而占据领先地位。Spark的这种学术基因，使得它从一开始就在大数据领域建立了一定优势。无论是性能，还是方案的统一性，对比传统的Hadoop，优势都非常明显。

2018-03-21 11:05:26

Spark大数据应用程序
终于有人把云计算、大数据和人工智能讲明白了！
一般谈云计算的时候会提到大数据、谈人工智能的时候会提大数据、谈人工智能的时候会提云计算……感觉三者之间相辅相成又不可分割。但如果是非技术的人员，就可能比较难理解这三者之间的相互关系，所以有必要解释一下。

2018-03-21 09:34:08

云计算大数据人工智能
大数据分析如何创建更好的移动应用用户体验
多年来，开发移动应用程序的技术一直在不断发展，这实际上为非技术方面的重大革命铺平了道路，并且这一切都与大数据有关。用户定期生成的大量数据可以帮助开发人员创建更多更好的移动应用程序。以下对大数据如何激励移动应用领域的重大突破进行探讨。

2018-03-20 14:59:42

移动应用程序大数据分析
上一页 1 ··· 8283848586 ··· 163
点赞

51CTO技术栈公众号

业务
速览
在线客服