51CTO首页
AI.x社区
博客
学堂
精品班
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

大数据

8917内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8917 条
什么是大数据？如何成为大数据的技术大牛？
大数据处理技术怎么学习呢?在做大数据开发之前，因为Hadoop是高层次的语言开发，需要懂得Java或者Python，很快的就能上手。所有的大数据生态架构都是基于linux系统的基础上的，所以你要有Linux系统的基本知识。如果你不懂Java或者Python还有Linux系统，那么这都是你必学的知识。

2018-06-25 11:20:18

LinuxPython大数据
五种好用的实时网站分析工具 译文
在运营网站时，您可以运用各种网络分析工具来获悉网站的访问者和他们的各种行为。现如今，针对不同的分析目的，有着不同种类的网站分析工具。在众多开源的网站分析选项中，最为著名的莫多于谷歌分析(Google Analytics)了。

2018-06-25 09:00:59

网络分析分析工具
我的数据科学成果为什么无法商业化？
在数据科学的实践应用中，有些工作成果可以获得数十亿级的商业回报，而绝大多数的工作成果却并没有达到预期的效果。本文中探讨了数据科学工作成果不尽如人意的四个可能原因。

2018-06-24 08:07:29

数据科学商业化大数据
机器学习实践：如何将Spark与Python结合？
Apache Spark是处理和使用大数据最广泛的框架之一，Python是数据分析、机器学习等领域最广泛使用的编程语言之一。如果想要获得更棒的机器学习能力，为什么不将Spark和Python一起使用呢?

2018-06-23 13:55:15

Apache SparPython数据
如何构建一个企业的大数据分析平台
在搭建大数据分析平台之前，要先明确业务需求场景以及用户的需求，通过大数据分析平台，想要得到哪些有价值的信息，需要接入的数据有哪些，明确基于场景业务需求的大数据平台要具备的基本的功能，来决定平台搭建过程中使用的大数据处理工具和框架。

2018-06-23 07:53:31

大数据分析框架数据
手把手教你用R处理常见的数据清洗问题（附步骤解析、R语言代码）
本文摘录自James D.Miller撰写的《数据科学统计学》(Statistics for Data Science)一书，该书由Packt Publishing出版。R是一种易上手的语言和环境，它本身很灵活且专注于统计计算，因此成为运算、清洗、汇总及生成概率统计等数据处理的一个绝佳选择。

2018-06-23 07:38:10

R数据清洗数据科学
机器学习大牛最常用的5个回归损失函数，你知道几个？
“损失函数”是机器学习优化中至关重要的一部分。L1、L2损失函数相信大多数人都早已不陌生。那你了解Huber损失、Log-Cosh损失、以及常用于计算预测区间的分位数损失么？这些可都是机器学习大牛最常用的回归损失函数哦！

2018-06-21 15:17:15

机器学习
备好数据后，数据科学家还要做什么？
在这个数据科学越来越火的时代，数据科学家的工作到底是怎样的呢?下面，我带大家走进真实的数据科学世界。

2018-06-21 08:31:13

数据数据科学大数据
企业部署ETL工具的三种方式，应该怎么选？
随着时间的推移，数据源、数据类型以及ETL供应商的数量均急剧增加，ETL工具的价格开始逐渐降低，这让很多中端市场也可以使用ETL工具自行解决问题，帮助公司建立现代化的数据授权的企业。

2018-06-21 08:16:41

ETL工具数据仓库企业
为什么数据科学家都钟情于最常见的正态分布？
对于深度学习和机器学习工程师们来说，正态分布是世界上所有概率模型中最重要的一个。即使你没有参与过任何人工智能项目，也一定遇到过高斯模型，今天就让我们来看看高斯过程为什么这么受欢迎。

2018-06-21 08:04:25

数据科学正态分布高斯
想学大数据？先看完这几本书再说
真正的数据爱好者有很多需要阅读的内容：大数据，机器学习，数据科学，数据挖掘等。本文首先帮大家盘点几本大数据相关的书籍，这些书都是亚马逊上的畅销排行榜上的。

2018-06-21 07:28:50

大数据书籍学习
用于数据科学和机器学习的GitHub存储库和Reddit主题（5月）
这篇文章总结了Reddit平台上5月份的一些关于数据科学的讨论，其中包括数据科学家在未来3年的作用以及有史以来最好的机器学习论文集。在GitHub社区中，英特尔开放了其NLP架构库，微软推出ML.NET以支持Dot Net开发者进行机器学习等。

2018-06-20 11:34:19

Reddit数据科学机器学习
2018世界杯数据分析：梅西为什么进不了球？
在阿根廷vs冰岛一战中，梅西的表现引来无数吐槽，不仅射丢点球，全场大部分时间还在“散步”。但基于数据的分析显示，梅西即使是走路，也比大多数人跑步效果更好。他就像一台高效的机器，搞清楚了如何用最少的能量占据最有价值的场地。

2018-06-20 11:26:41

世界杯梅西数据分析
数据分析外包的利与弊
企业会将各种IT和业务功能外包给服务提供商，这就包括一些非常具有战略意义的功能。而数据分析也越来越多地成为技术领域更具竞争优势的领域之一。

2018-06-20 11:06:19

数据分析外包企业
6个人如何维护上千规模的大数据集群？
本文主要介绍饿了么大数据团队如何通过对计算引擎入口的统一，降低用户接入门槛；如何让用户自助分析任务异常及失败原因，以及如何从集群产生的任务数据本身监控集群计算/存储资源消耗，监控集群状况，监控异常任务等。

2018-06-20 09:58:36

大数据集群异常
大数据解锁传统企业面临的挑战
一些专家认为，大数据将成为市场营销的最大标志。其他人则认为大数据正在解决物流挑战。但在进行民意调查后，普遍的共识是大数据对安全和服务交付产生了最大的影响。

2018-06-20 09:24:29

大数据网络安全
阿里高德城市大脑 智慧交通战略发布 公共服务版首次亮相
6月19日，世界交通运输大会期间，国内最大的移动出行平台高德地图联手阿里云在北京发布城市大脑·智慧交通战略，城市大脑·智慧交通公共服务版也首次亮相。

2018-06-19 17:22:28

阿里高德城市大脑
【科普文】银行业9大数据科学应用案例解析
在银行业中使用数据科学不仅仅是一种趋势，它已成为保持竞争的必要条件。 银行必须认识到，大数据技术可以帮助他们有效地集中资源，做出更明智的决策并提高绩效。

2018-06-19 16:26:18

数据科学银行业机器学习
备好数据后，数据科学家还要做什么？
数据科学越来越火，很多人都想转行入坑数据科学家，这当然是好事。可是很多人都以为数据科学、机器学习等等流行词对应的工作，就是把数据塞进Sckit-Learn这个算法库里而已。

2018-06-19 09:00:25

数据科学数据算法
如何用50行代码构建情感分类器
本文介绍了如何构建情感分类器，从介绍自然语言处理开始，一步一步讲述构建过程。我们将使用亚马逊产品评论、IMDB 电影评论和 Yelp 评论来构建情感分析模型。

2018-06-19 08:35:51

情感分析数据集代码
开源一段代码-微信好友分析
今天早上翻笔记的时候，发现了一份3个月前写的代码，当时是觉得好玩写的，现在就分享出来给大家。代码的github地址我已经放在了文章尾部，需要的童鞋可以自取。

2018-06-19 08:02:00

统计程序微信
三种可视化方法，手把手教你用R绘制地图网络图！
不知道如何在地图上可视化网络图?下面这篇博客将使用R中的igraph、ggplot2或ggraph包来介绍三种在地图上可视化网络图的方法。在对地理位置以及位置的连接关系进行可视化时，还可以在图中展示一些属性。

2018-06-16 23:34:09

可视化地图R
基于Hadoop的数据分析平台搭建
随着越来越多的企业开始使用Hadoop平台，也为Hadoop平台引入了许多的技术，如Hive、Spark SQL、Kafka等，丰富的组件使得用Hadoop构建数据分析平台代替传统数据分析平台成为可能。

2018-06-15 20:44:40

Hadoop数据分析数据
最强观战指南 | Python分析热门夺冠球队（附源代码）
2018年，火热的世界杯即将拉开序幕。在比赛开始之前，我们不妨用 Python 来对参赛队伍的实力情况进行分析，并大胆的预测下本届世界杯的夺冠热门球队。

2018-06-15 11:22:52

Python分析世界杯
WGDC2018“空间大数据+海洋大数据”峰会顺利召开
6月14日，由泰伯网主办的“WGDC2018地理信息开发者大会”在北京国家会议中心隆重举行。作为海洋信息化领域排头兵企业，星天科技应邀参加并承办大会首届“空间大数据+海洋大数据”峰会专题论坛，并在大会的展览展示区安排展位作精彩展示。

2018-06-14 21:59:54

WGDC大数据
从跨界到融界，四维图新深耕位置大数据发布MineData 2.0
2018年6月14日，时隔一年，四维图新再一次亮相北京国家会议中心，举办了以“融界”为主题的四维图新位置大数据平台MineData 2.0发布会。

2018-06-14 21:21:33

大数据MineData 2.
空间智能驱动万物互联 WGDC 2018大会成功召开
今日，由领先的空间科技媒体&创新创业服务平台泰伯网主办的WGDC 2018全球地理信息开发者大会在北京国家会议中心成功拉开帷幕。

2018-06-14 21:15:24

空间智能 WGDC
未来公务员都会是数据分析高手了，你还要当个只会Excel的小白吗？
据外媒报道，新加坡2万公务员将在未来5年内接受数据分析培训，新加坡政府已任命首席数据战略官员，领导实现政府各部门的数据化计划。大数据时代，公务员们都得是“数据”高手!数据分析在新加坡已经是最热门的职业，也是应届生们的首选职业之一。

2018-06-14 15:22:54

大数据数据分析职业
为什么说 Java 程序员到了必须掌握 Spring Boot 的时候？
说起 Spring Boot 我们不得不先了解一下 Spring 这个企业，不仅因为 Spring Boot 来源于 Spirng 大家族，而且 Spring Boot 的诞生和 Sping 框架的发展息息相关。

2018-06-13 16:08:34

Java Spring Boo程序员
2018年值得关注的5个大数据趋势
据调研机构Forrester Research最近发布的营销报告，随着组织的领导者开始意识到大量使用大数据技术所需的工作量，人工智能(AI)正在超越其流行术语的阶段。研究报告指出，实施人工智能来实现目标需要精确的部署、规划和治理。尽管如此，该报告预测随着大数据趋势进一步倾向于人工智能，该技术将有巨大的改进。

2018-06-13 15:04:43

大数据趋势人工智能
2018年世界杯冠军竟然被大数据算出来了，还要比吗？
2018年俄罗斯世界杯快来了，今年的大力神杯又将花落谁家?想必每个球迷心中都有自己的答案。但是对于那些银行家、投资商们来说，想要预测冠军，光靠一片热诚之心、以及对足球技术的理解，是不够的。他们要的是数据。

2018-06-13 14:59:11

大数据世界杯冠军
3D打印与大数据会碰撞出什么样的火花？
现如今，投资界纷纷将目光聚焦在移动互联网应用、互联网金融以及智能穿戴设备等项目，似乎它们将是一批风口上的“猪”。而小编将要阐述和挖掘的这座金矿，就是一头能真正能飞起来的“猪”——以3D打印和大数据为基础的分布式制造。这种制造模式将彻底打通互联网业和制造业，给人类带来深刻的社会变革。

2018-06-13 13:25:01

3D打印大数据工业革命
大数据+人工智能 双擎驱动企业数字化转型 原创
数字化时代，大数据及人工智能成为驱动企业业务增长的技术引擎，数字化转型也已成为企业生存和发展的必修课。全球领先的数据和分析解决方案供应商Teradata天睿公司，也在加速其在大数据及人工智能领域的布局，适时推出了Teradata Everywhere及AI战略，强化Teradata分析平台(Teradata Analytics Platform)，助力客户加速数字化转型。

2018-06-13 10:55:55

大数据人工智能Teradata
Airbnb首席架构师李聪：IT系统架构设计应充分考虑用户隐私 原创
针对当前信息安全问题频发的现状，李聪认为原因有三：一是隐私相关的法律法规不够健全，尚未引起足够重视;二是中小型企业没有花费太多的人力、物力和财力去做这件事，导致了一些隐私事件的发生;三是有了健全的隐私机制后，仍然会有一部分人利用隐私漏洞去做一些不好的事情。

2018-06-13 09:25:27

IT系统架构隐私李聪
Hadoop HBase存储原理结构学习
hbase是bigtable的开源山寨版本。是建立的hdfs之上，提供高可靠性、高性能、列存储、可伸缩、实时读写的数据库系统。

2018-06-13 08:53:39

HadoopHBase存储
2018数据科学和机器学习调查:Hadoop被抛弃!
近日，著名数据科学网站 KDnuggets 发布了 2018 年数据科学和机器学习工具调查结果。超过 2000 人对自己「过去 12 个月内在项目开发中使用过的数据挖掘/机器学习工具和编程语言」进行了投票。该统计还对过去三年来的排名进行了对比分析。

2018-06-12 16:27:45

数据科学机器学习Hadoop
HBase从入门到精通系列：误删数据如何抢救？
有时候我们操作数据库的时候不小心误删数据，这时候如何找回？mysql里有binlog可以帮助我们恢复数据，但是没有开binlog也没有备份就尴尬了。如果是HBase，你没有做备份误删了又如何恢复呢？

2018-06-12 11:01:55

HBase误删数据
教机器遗忘或许比学习更重要：让AI健忘的三种方式
现在，数据科学家们正在尝试应用神经科学原理来改进机器学习，并且坚信人类大脑能够解锁图灵完备的人工智能。

2018-06-12 00:33:20

AI机器学习人工智能
上海人才大数据：上下班1小时，年薪30万
近日，一部电视剧《上海女子图鉴》将“上海中高端人才”推上了热议话题，也引起了很多人对上海中高端人才的关注。为了满足公众对这个群体的好奇心，5月25日，我们发布了《2018年上海中高端人才及沪漂大数据报告》(以下简称“报告”)。报告发现，上海中高端人才净流入率位居全国城市第11名。

2018-06-11 16:26:09

上海高端人才报告
三招提升数据不平衡模型的性能（附python代码）
针对数据不平衡问题有相应的处理办法，比如对多数样本进行采样使得其样本数量级与少样本数相近，或者是对少数样本重复使用等。最近恰好在面试中遇到一个数据不平衡问题，这也是面试中经常会出现的问题之一，现向读者分享此次解决问题的心得。

2018-06-11 16:20:22

数据不平衡数据集算法
从人脸识别到情感分析，这有50个机器学习实用API！
还在为找不到机器学习的API而烦恼吗?本篇文章将介绍一个包含50+关于人脸和图像识别，文本分析，NLP，情感分析，语言翻译，机器学习和预测的API列表。

2018-06-10 08:35:30

机器学习API脸识别
10本必读的机器学习和数据科学免费在线电子书
KDnuggets 网站编辑 Matthew Mayo 挑选了一些机器学习和数据科学相关的书籍。是时候让你的书架上新增几本机器学习和数据科学书籍了，最重要的是这些书籍全部有免费的电子版!!!

2018-06-08 16:39:53

机器学习数据科学书籍
Kaggle 20G数据集强势分析“绝地求生”，科学吃鸡攻略拿走不谢！
在吃鸡的过程中你是否捧着手机战战兢兢，一会儿激动得起飞、一会儿手抖得厉害;是否有过落地3分钟就被毙、跑不过毒倒在半路上失血致死、站在草丛中被不明方向的子弹狙击而亡、出门舔箱被猪队友当作敌人干掉……想游戏里活得更久怎么办，大数据分析来帮你。

2018-06-08 16:33:34

大数据游戏吃鸡
数据解读：中国高校招生如何不平等？
根据清华大学校内论坛的信息，我抓取了2006到2013年间各省(即各考区)就读清华的人数。由于清华在中国高等教育中占据特殊地位，这份数据不失为探索中国高校招生地域不平等问题的起点。

2018-06-08 16:28:23

高校招生清华北大
大数据存储平台之异构存储实践深度解读
在数据被视为公司资产的时代，每个公司基本都会保存最近数年的数据，而这些数据尤其是冷数据的累积也给存储平台带来了甜蜜的负担。下面就来分享下如何解决这些“负担”。

2018-06-07 16:33:31

大数据冷热数据存储平台
如何克服数据湖与客户互动分析之间的瓶颈
创建客户的完整视图，并通过最佳渠道实时互动。当今在商业领域的竞争就是了解你的客户。消费者期待个性化的服务和令人满意的体验，而与他们互动品牌无关的东西都可能导致客户选择其他品牌。

2018-06-07 16:10:08

数据湖客户互动互动分析
Python数据预处理：使用Dask和Numba并行化加速
作为旧金山大学的一名数据科学硕士，会经常跟数据打交道。使用Apply函数是我用来创建新特征或清理数据的众多技巧之一。现在，我只是一名数据科学家，而不是计算机科学方面的专家，但我是一个喜欢捣鼓并使得代码运行更快的程序员。现在，我将会分享我在并行应用上的经验。

2018-06-07 15:58:52

Python函数数据
人工智能与大数据的区别
人工智能和大数据是人们耳熟能详的流行术语，但也可能会有一些混淆。人工智能和大数据有什么相似之处和不同之处?它们有什么共同点吗?它们是否相似?能进行有效的比较吗?

2018-06-07 15:22:58

人工智能大数据比较
有些决策不能，也永远不该委托给机器
由于数据偏差、系统内置偏见，不了解统计数据以及过度信任机器的决策者，还有其他众多的挑战，算法永远不会给我们“完美”的结果。那么，在算法和你的判断产生出入时，你将在多大程度上依赖算法？

2018-06-07 07:59:40

算法机器数据分析
腾云大学与美世咨询联合发布会圆满举行，全面明确行业定义
《专业数据人才教育行业生态报告》发布会今日举行，美世咨询中国区副总裁兼战略客户部总经理乔鲁诺先生对专业数据人才市场规模与现状做出介绍；TalkingData CEO助理、腾云大学（TalkingData University）执行校长杨慧女士则对专业数据人才定义、专业数据人才教育行业生态结构等问题做出明确回答。

2018-06-06 19:14:09

TalkingData腾云大学美世咨询
上一页 1 ··· 9394959697 ··· 179
点赞

51CTO技术栈公众号

业务
速览
在线客服