51CTO首页
AI.x社区
博客
学堂
精品班
直播训练营
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

大数据

8805内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8805 条
做数据分析，首先解决这两类数据质量问题
在本文中，我会带领大家仔细区分这些“类型”有何不同，并且如何利用这些“类型”在开发预算中确保我们的优势资源放在何处。

2017-11-09 06:26:05

数据分析数据质量数据
大数据、人工智能、机器人的血缘关系？
大数据、人工智能(AI)、机器人、算法、深度学习、物联网、传感器……，这些名词似乎每天都会看到或听到，当人们还搞不清楚是什么时，媒体已不断报导人类的工作将很快被取代，让人们愈来愈焦虑。

2017-11-08 12:00:02

大数据人工智能算法
数据倾斜那些坑 你都迈过去了吗？
数据倾斜是大数据领域绕不开的拦路虎，当你所需处理的数据量到达了上亿甚至是千亿条的时候，数据倾斜将是横在你面前一道巨大的坎。迈的过去，将会海阔天空!迈不过去，就要做好准备：很可能有几周甚至几月都要头疼于数据倾斜导致的各类诡异的问题。

2017-11-08 11:13:14

大数据Spark数据倾斜
Tech Neo技术沙龙•第17期——云时代网络边界管理实践

2017-11-08 11:03:59

技术沙龙Tech Neo云
闲谈大数据和算法 知道这些让你受益无穷
谈起算法大家都只会想到经典算法和机器算法，除此之外还有很多有意思的算法，特别是为了解决大数据量问题的算法，这些很容易被忽略掉，但是我认为这才算是大数据算法。

2017-11-08 10:54:32

大数据算法机器学习
MySQL数据库渗透及漏洞利用总结
目前很多架构都以Mysql作为数据库管理系统，例如LAMP、和WAMP等，在针对网站渗透中，很多都是跟Mysql数据库有关，各种Mysql注入，Mysql提权，Mysql数据库root账号webshell获取等的，但没有一个对Mysql数据库渗透较为全面对总结，针对这种情况我们开展了研究。

2017-11-08 10:20:10

数据库MySQL渗透及漏洞
文科生如何七周内入门数据分析？
本文是TalkingData某项目组成员在项目过程中由于项目需求被逼学习数据分析的资料分享，作者是一个文科生，七周之内掌握基本的数据分析知识，希望能帮助想要入行的文科同学。

2017-11-07 11:40:36

大数据数据分析文科生
受众画像数据只是看看？——基于朴素贝叶斯的用户数据挖掘
如今信息流优化已经成为业内交流的热点，优化创意、定向等已是老生常谈，唯独受众画像的数据分析少有人提及，尚有可挖的地方。今天借此机会，和大家分享一种受众数据分析的思路。

2017-11-07 11:17:40

朴素贝叶斯画像数据数据挖掘
JDD-2017京东金融全球数据探索者大会开幕 发布京东金融云
京东金融与红杉资本联合主办的首届“JDD-2017京东金融全球数据探索者大会”开幕。此次JDD大会将通过论坛、大赛等形式，为行业挖掘发现人才，将技术、场景与数据相结合，加快AI等前沿技术落地于金融等行业，解决实际问题。

2017-11-06 20:59:08

全球数据探索者
快消品图像识别丨无人店背后的商品识别技术
人工智能一浪接一浪地席卷全球，AI的其中一个重要分支——计算机视觉，也如雨后春笋，不断涌现出新的想法和应用。人脸识别已经逐渐渗透我们的日常生活，机器能够认准人脸，想必大家都有所耳闻;而另一类计算机视觉的应用，是进行商品识别。

2017-11-06 16:50:38

人工智能图像识别数据逻辑
嫌弃Hadoop?可能是你的打开方式有问题
关于 Hadoop 所谓的消亡，以及它跌落神坛的报道数不胜数。有很多人放马后炮说，Hadoop 从一开始就没有意义。还有人说“Hadoop 对于小型，临时的工作来说很慢”、“ Hadoop 很难”、“ Hadoop 已经死了，Spark 才是胜者”等等。那么事实真的如此吗?

2017-11-06 16:06:05

大数据Hadoop打开方式
大数据看中国社会老龄化，关注老年人健康
随着人口老龄化态势的加剧，我国已经进入老龄社会。老年人群健康状态脆弱，对医疗服务需求高;生活不能自理或部分不能自理的老人，更是给卫生、福利、社会服务等方面带来艰巨挑战。促进健康老龄化，值得引起你我的关注。

2017-11-06 15:03:58

大数据社会老龄化老年人健康
大数据看「双宋」婚礼，热度不及公布婚讯
宋仲基与宋慧乔在韩国举行婚礼引发公众关注。据新浪微舆情大数据分析显示，在过去24小时内(10月31日09：30至11月1日09：30)，“双宋”婚礼的网络传播热度指数达到了62.86，位列娱乐事件热度排行榜榜首。在该榜单排名前10的事件中，有5件事都和二人的婚礼有关。

2017-11-06 14:46:03

大数据双宋婚礼热度
大数据的未来：人们应该意识到的10个预测
到了2020年，世界上每个人每秒将创造7 MB的数据。在过去的几年里，我们已经创造了比人类历史上更多的数据。大数据席卷全球，并且没有放缓的迹象。人们可能会想，“大数据产业从哪里开始?”

2017-11-06 14:35:54

大数据数据预测
如何像专业人士一样挖掘大数据？
弗雷斯特研究公司(Forrester Research)的分析师Mike Gaultieri指出，机器学习并不像传统的商业情报工作那样，其结果是确定的。他说：“如果你在寻找一种机器学习模式，可以说‘我会尝试’，但你可能无法成功实现。企业应该明白仅仅因为希望拥有预测股市的模型，并不意味着就会实现愿望。”

2017-11-06 14:18:03

大数据数据挖掘机器学习
大数据时代谁给隐私“上锁”
行业内部侵犯公民个人信息案件频发，让人忧心忡忡。例如，多家二手车网上交易平台均可以查找公民个人车辆信息。大数据时代，个人信息如何保护，值得深思。

2017-11-06 13:39:20

大数据隐私个人信息
360°捕捉用户行为轨迹！谐云科技推出高能用户行为分析工具
信息爆炸，企业已经觉醒：大数据时代需掌握用户的行为轨迹，还原用户画像，才能从拍脑袋决策转型为数据驱动决策，最终改善用户体验、优化产品。

2017-11-06 10:52:36

大数据
基于Storm构建分布式实时处理应用初探
本文我不会具体阐述Storm集群和Zookeeper集群如何部署的问题，这里想通过一个实际的案例切入，分析一下如何利用Storm完成实时分析处理数据。

2017-11-03 15:05:56

Storm数据处理服务器
企业发展滞缓，还不是因为踩了这四个数据大坑
在多年工作中，Amanda Richardson一直专注于数据研究。她发现，越来越多的公司会利用数据来进行决策。但同时，她也发现，在各种数据趋势和方法中，低效与误导问题非常严重，甚至可能会让公司错失很多机遇。

2017-11-03 11:06:36

数据企业数据科学
有没有想过 你的数据分析方法可能已经过时?
在拥挤不堪、投资过剩的数据分析市场上，供应商为了卖出自己的产品不断放出烟雾弹，想要穿过烟雾看到“真相”，却是一大难事。以下五点，是未来数据分析市场可能的走向，仅供参考。

2017-11-03 07:27:50

数据分析数据编译器
数据即权力，无现金社会就是大数据的圈地运动！
无现金社会，在今年成为一个热词。最近，支付宝和微信支付分别推出了“无现金城市周”和“无现金日”活动，让它变得如日中天。

2017-11-02 15:05:38

大数据无现金社会移动支付
如果有人问你什么是大数据？不妨说说这10个典型的大数据案例
Gartner的分析师Doug Laney用55分钟讲述55个大数据应用案例不是用来虚张声势，Laney的意图是说明大数据的实际应用前景，听众们应该思考如何在自己公司里让大数据落地并促进业务的发展,下面仅摘取其中10个典型的案例.

2017-11-02 15:04:15

大数据大数据应用
容器与微服务技术将给安全带来怎样的影响？（下） 译文
基于容器与微服务技术的云原生体系正快速普及，并迫使安全人员重新考虑保护手段的实际成效。一套全面的云原生软件安全程序应面向整个应用程序生命周期，包含容器的构建、部署与运行阶段。

2017-11-02 14:38:31

容器微服务
易观方舟：革命性的精细化运营数据分析产品 原创
正值第8届易观A10大数据应用峰会在北京召开之际，国内领先的大数据分析公司易观在峰会上发布了全新的数据分析产品——“易观方舟”。

2017-11-02 14:23:04

易观方舟数据分析
三步走——带你打造一份完美的数据科学求职简历
本文介绍了关于写数据科学家简历的一些技巧，主要包含三个部分，分别为简历前的材料准备，写简历时应注意的地方以及对整个简历的整理。不管你是不是数据科学领域的工作者，本文对于即将求职或找实习的同学而言是一份不可多得的简历写法指南。

2017-11-02 14:20:44

数据科学简历数据科学家
Oracle解密“零丢失”的数据保护 原创
Oracle（甲骨文）零数据丢失恢复一体机是一个突破性的数据保护解决方案，通过紧密集成 Oracle数据库直接满足这些需求。该设备可消除数据丢失风险并大幅降低数据保护对生产服务器带来的开销。此外，它还可以通过扩展保护数以千计的数据库、确保端到端的数据验证并实现全生命周期保护，包括磁盘备份、磁带 备份和远程复制。

2017-11-02 14:18:04

数据Oracle
数据处理性能对比（Python原生vs Pandas vs Numpy）
对于任何数据科学家来说，速度和时间都是一个关键因素。在商业活动中，通常不会使用仅仅有数千个样本的玩具数据集。大部分时候你的数据集包括数百万或数亿个样本。客户订单，网络日志，帐单活动，股票价格等 - 现在的数据集非常庞大。

2017-11-02 13:20:08

数据处理PythonNumpy
十大步骤帮你有效使用预测分析算法
一个有效的预测分析程序需要数据分析生命周期中商业用户的参与和支持。考虑以下10个步骤，有助于发现促进分析活动成功的基本元素。

2017-11-02 06:13:16

预测分析算法数据分析
数据管理的5项最佳实践
一直以来数据的力量都被忽视了。这次让我们赋予数据跟人类一样的民主权，听听它会说些什么。企业机构也一起来学习一下需要采用哪五种管理实践。

2017-11-01 14:45:51

数据管理数据
大数据是如何存储和管理的?
近年来，小企业也从大数据中受益，大幅度推动支出和投资，并允许他们与规模更大的企业进行竞争。最终，所有事实和数字的存储和管理逐渐变得更加容易。以下是有效存储和管理大数据的三种方式。

2017-11-01 14:29:38

大数据存储管理
新零售下，当大数据遇上了心理学
面对当今的中国消费者，中国的零售商不但需要借助数据来分析，来洞悉数据背后的逻辑、规律和趋势，同时也需要运用相关的心理学知识来准确体察和把握消费者大众的内心感受，真正站在消费者的立场上考虑经营，这才是新零售的精髓所在。

2017-11-01 14:09:30

大数据心理学新零售
向云上迁移数据时如何避免停机和中断
越来越多的组织需要在数据中心/云之间移动数据，但是在迁移过程中的一个关键风险点是停机。

2017-10-31 20:25:22

大数据迁移数据避免停机
大数据告诉你：90后的钱都花哪儿了？
90后是互联网下成长起来的一代，他们的消费共性与互联网的引领密不可分。在移动互联的时代背景下，90后在产品、渠道、营销、金融四大方面都有独特的消费特征。

2017-10-31 16:06:51

大数据90后消费
使用Sklearn进行数据挖掘
我们使用sklearn进行虚线框内的工作(sklearn也可以进行文本特征提取)。通过分析sklearn源码，我们可以看到除训练，预测和评估以外，处理其他工作的类都实现了3个方法：fit、transform和fit_transform。从命名中可以看到，fit_transform方法是先调用fit然后调用transform，我们只需要关注fit方法和transform方法即可。

2017-10-31 11:55:46

sklearn数据挖掘自动化
基于Python的Grib数据可视化
利用Python语言实现Grib数据可视化主要依靠三个库——pygrib、numpy和matplotlib。pygrib是欧洲中期天气预报中心的GRIG API C库的Python接口，通过这个库可以将Grib数据读取出来；numpy是Python的一种开源的数值计算扩展，这种工具可用来存储和处理大型矩阵；matplotlib是python著名的绘图库，十分适合交互式地进行制图。

2017-10-31 09:38:53

大数据数据可视化Python
如何利用C++搭建个人专属的TensorFlow
在实际过程中，C++可能并不适合做这类事情。我们可以在像「Oaml」这样的函数式语言中花费更少的时间开发。现在我明白为什么「Scala」被用于机器学习中，主要就是因为「Spark」。然而，使用 C++有很多好处。

2017-10-30 17:15:35

大数据C++TensorFlow
平安人寿谢佳标：利用Microsoft R Server对大数据进行机器学习 原创
R语言是数据从业者的利器，但其基于内存的诟病也一直被人所嫌弃。虽然这几年很多优秀的扩展包极大提升了R语言的性能，但在面对企业级大数据挖掘面前，也会显得力不从心。

2017-10-30 15:27:49

R机器学习大数据
提升代码可读性的10个技巧
代码可读性是计算机编程领域中普遍存在的问题。这也是我们成为开发者首先要学习的事情之一。本文会详细介绍在编写强可读性代码时最佳实践中最重要的一部分内容。

2017-10-30 15:22:29

代码可读性技巧
破解大数据孤岛化 SaaS主流厂商共建开放标准
KuickDeal（kuick.cn）的创始人兼首席算法科学家崔超介绍，“智能交互SaaS协会”的主要目的在于建立开放标准，帮SaaS厂商和SaaS应用客户，打通大数据，解决越来越严重的“大数据孤岛化”问题。

2017-10-30 11:29:18

KuickDealSaaS协会大数据
大数据时代：十大最热门的大数据技术
随着大数据分析市场快速渗透到各行各业，哪些大数据技术是刚需?哪些技术有极大的潜在价值?根据弗雷斯特研究公司发布的指数，这里给出最热的十个大数据技术。

2017-10-30 11:11:03

大数据数据库大数据技术
易观A10造的“船”如何为企业的用户精细化运营护航？
10月27日，为期两天的第8届易观A10大数据应用峰会在北京正式开幕。国内领先的大数据分析公司易观在峰会上发布了全新的数据分析产品——“易观方舟”。

2017-10-28 15:35:59

易观A10运营
GrowingIO 2017增长大会 助企业实现业务高增长
“ GrowingIO 2017 增长大会 ”10 月27 日在北京金茂万丽酒店举办。现场吸引700多名包括大中型企业代表、互联网新兴增长公司、GrowingIO客户和合作伙伴、 媒体、政府代表及20位荣获 GrowingIO 增长英雄的嘉宾到达现场。

2017-10-27 19:03:20

GrowingIO
互联网高可用架构技术实践
高可用HA(High Availability)是分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计减少系统不能提供服务的时间。

2017-10-27 14:52:31

互联网高可用架构高可用
在弹性应用程序设计上，eBay为什么选择MongoDB？
作为世界前十十个全球零售品牌，拥有1.7亿活跃买家和10亿在线市场，eBay无法承受系统停机带来的损失。这就是为什么公司依靠MongoDB作为其核心企业数据平台标准之一，为运行ebay.com的多个面向客户的应用程序提供支持。

2017-10-27 13:30:59

大数据MongoDBeBay
浅析Mybatis与Hibernate的区别与用途
有很长一段时间对mybatis是比较陌生的，只知道与Hibernate一样是个orm数据库框架。随着使用熟练度的增加，发现它与Hibernate区别是非常大的，应当结合不同的情况分析选用。

2017-10-26 14:59:47

MybatisHibernate数据库
微软开源用于Spark的深度学习库MMLSpark
微软开源了MMLSpark，用于Apache Spark的的深度学习库。MMLSpark可以与微软认知工具包和OpenCV完美整合。虽然SparkML可以建立可扩展的机器学习平台，绝大多数开发者的精力都耗在了调用底层API上。MMLSpark旨在简化PySpark中的重复性工作。

2017-10-26 13:54:49

深度学习SparkMMLSpark
大数据真的在云计算上的快车上吗？
关于云计算中大数据的主题，ODPi UAB在混合云模型中看到了他们的未来。虽然他们认为人们将在未来三年内看到云计算更多的应用，但他们将会在现有投资的基础上开展，而不是完全取代现有的投资。

2017-10-26 13:05:42

大数据云计算ODPiUAB
2017年中国程序员调查分析：大数据就业前景广阔
通过对北京、广东、浙江、上海等全国28个省的优秀开发者的调查信息，对程序员的年龄组成、性别比例、擅长的计算机语言、工作时间以及薪资等进行了统计和分析。

2017-10-26 12:07:33

大数据程序员语言
大数据时代和Hadoop时代的维度建模和Kimball数据集市
维度建模是数据建模的一种特殊方法。维度建模有两个同义词，数据集市和星型结构。星型结构是为了更好地进行数据分析，参考下面图示的维度模型，可以有一个很直观的理解。通过它可以立即知道如何通过客户、产品、时间对订单进行分割，如何通过度量的聚集和比较对订单业务过程进行绩效评估。

2017-10-26 09:31:14

Hadoop维度建模Kimball
别不相信 大数据已经侵入你生活的方方面面
其实对我们普通人来说，大数据并不只是简单的“很大一堆数据”，如果这些数据被充分分析、利用，那么就可以通过方方面面来影响我们的生活，不仅更便利，而且直接可以提升幸福感。

2017-10-25 20:26:19

大数据生活金融
上一页 1 ··· 103104105106107 ··· 177
点赞

51CTO技术栈公众号

业务
速览
在线客服