51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
信创认证
公众号矩阵
移动端
视频课免费课排行榜短视频直播课软考学堂
全部课程软考信创认证华为认证厂商认证IT技术PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9330内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9330 条
马云被约谈 阿里大数据的羹怎么分给每一个人？
大数据和区块链的是两种截然不同的新兴技术，但是它们有着很大的可以结合的空间。区块链的本质是一种去中心化的分布式账本。它也可以理解为是一-种不可篡改的、全历史的、分布式数据库存储技术。

2020-11-06 18:12:19

大数据区块链蚂蚁金服
懂了数据结构框架思维，一切算法不过是纸老虎
数据结构的存储方式只有两种：数组(顺序存储)和链表(链式存储)。这句话怎么理解，不是还有散列表、栈、队列、堆、树、图等等各种数据结构吗?

2020-11-06 12:48:16

数据结构算法分析
警惕大数据“杀熟”之风抬头
大数据“杀熟”，是指同样的商品或服务，不同用户看到的价格或搜索到的结果不同，从而导致用户权益受损的现象。

2020-11-06 11:37:42

大数据技术电商
想做数据分析？先避开这4个新手常见的错误！
一般聊到如何做数据分析的文章，都会从各个视角去介绍数据分析的思路和流程。但今天这篇文章，不会告诉你怎么按1234的步骤做数据分析，而是告诉你在数据分析中，不要做什么。

2020-11-06 08:30:45

数据分析数据思维错误
数据中台到底包括什么内容？一文详解架构设计与组成
本文将介绍数据中台到底包括什么内容。企业建设数据中台的过程中哪些能力是必选项，哪些是可选的，将在本文一一揭晓。

2020-11-06 00:55:16

数据中台数据大数据
区分理解Flink水印延迟与窗口允许延迟的概念
本文接下将展开讨论分析“水印延迟”与“窗口允许延迟”概念及区别。

2020-11-06 00:52:33

Flink水印延迟数据
电商大数据“杀熟”怎可屡禁不止？
近日，北京韩女士在某电商平台购物时，中途错用另一部手机结账，竟然意外发现同一商家的同一件商品价格不同。在她注册约12年、且经常使用、总计消费金额近26万元的一个高级会员账号上显示的价格，反而比仅注册5年、很少使用、总消费不过 2400多元的一个普通账号贵了25块钱。

2020-11-05 16:02:56

大数据电商技术
一个数据爬取和分析系统的演变过程
假设有这样一个需求，需要你写一个爬虫，爬取微博中关于某个话题的讨论，然后分析情感，最后用一个网页来展示分析结果。

2020-11-05 08:23:24

数据爬取数据分析爬虫
【鸿蒙开发板试用报告】HiSpark Wi-Fi IoT智能家居套件之云服务器篇
由于samba工具服务端口445继勒索病毒“永恒之蓝”被封，与WINDOWS远程共享文件受阻，但又想利用云服务器资源进行代码编译，经测试本方法稳定高效。

2020-11-04 13:20:14

HiSpark
数据资产？你并没有什么数据资产
数据垃圾还是数据资产，这是一个问题。数据绝对不都是资产，更多数据是垃圾。

2020-11-04 10:33:19

数据
数据分析可以改善工作多样性吗?
人力资源分析平台Visier公司首席执行官Ryan Wong日前对数据分析为什么可以帮助组织领导者实现工作的多样性和包容性进行了分析和探讨。

2020-11-04 10:29:42

数据分析工作多样性大数据
大数据风控的挑战：团伙骗贷逾十亿 线上信贷如何反欺诈？
作为一起新型贷款诈骗案件，相关监管部门和银行已关注到其中的欺诈风险，目前已有部分银行暂停省内个人线上信贷产品。

2020-11-04 09:41:07

大数据信贷技术
技术创新驱动 永洪科技联合生态提速企业数字化转型 原创
疫情期间，全球经济受挫，永洪科技也在积极应变，始终践行“以卓越的数据技术为客户创造价值，实现客户成功”的价值观，日益夯实着技术创新的根基，在技术创新能力、场景方案能力、生态体系建设能力以及面向全行业的数据分析师培养能力方面持续进阶，全方位驱动企业数字化升级。

2020-11-03 16:07:38

永洪科技数据分析BI
IDC：华为云再次位居中国大数据管理平台领导者象限
近日,全球领先的IT研究和咨询公司国际数据公司(IDC)最新发布《IDC MarketScape: 中国大数据管理平台厂商评估,2020》报告,对中国主流大数据厂商从能力、市场、战略三个维度进行了全面评估。

2020-11-03 15:05:08

华为云大数据管理
数据分析对于防止投资失误至关重要
在数据分析的许多用途中，其中一个主要用途是防止投资错误。数据分析可以帮助组织发现新的投资模式和不良投资，同时在投资时需要自己如何解决一些问题。

2020-11-03 11:03:59

大数据数据分析工具
Hive数据倾斜案例讲解
实际搞过离线数据处理的同学都知道，Hive SQL 的各种优化方法都是和数据倾斜密切相关的，所以我会先来聊一聊 “「数据倾斜」” 的基本概念，然后再在此基础上为大家介绍各种场景下的 Hive 优化方案。

2020-11-03 10:16:24

Hive数据倾斜Hive SQL
职场大数据：女性程序员数量两年间增长70% 平均月薪达1.5万
女性一直是程序员职场的“稀缺物种”，不过情况正在发生变化。10月24日程序员节当天，腾讯课堂联合猎聘正式发布《中国女性程序员职场力大数据报告》（以下简称“报告”），报告显示程序员领域不再是男性的专属领地，2018至2020年三年间，女性程序员的增长比例将近70%。

2020-11-03 09:23:46

大数据程序员女性
Windows10系统下Hadoop和Hive开发环境搭建填坑指南
笔者目前需要搭建数据平台，发现了Windows系统下，Hadoop和Hive等组件的安装和运行存在大量的坑，而本着有坑必填的目标，笔者还是花了几个晚上的下班时候在多个互联网参考资料的帮助下完成了Windows10系统下Hadoop和Hive开发环境的搭建。这篇文章记录了整个搭建过程中的具体步骤、遇到的问题和对应的解决方案。

2020-11-03 08:36:08

Hadoop
数据骗子无处不在，教你拆穿所谓“万金油”
数据分析师、机器学习/人工智能工程师、统计学家，这样的头衔是不是听起来很高大上？但小心别被骗了！高薪诱惑之下，不少数据骗子也隐藏在其中，这些骗子毁了遵纪守法的数据专业人士的好名声。

2020-11-02 17:34:22

数据分析人工智能技术
盘点大数据处理引擎
提到大数据，我们就离不开数据的收集整理，其中ETL是我们经常使用的用于构建数据仓库， 构建大数据的方法。

2020-11-02 15:56:04

大数据数据库技术
大数据在医疗、供应链和智慧城市中的作用
通过我们的数据货币化可以帮助加快世界应对未来流行病的反应，并使优秀的智慧城市成为现实吗？

2020-11-02 15:42:11

大数据智慧城市技术
用Python构建和可视化决策树
决策树的目标是将数据分成多个组，这样一个组中的每个元素都属于同一个类别。决策树也可以用来近似连续的目标变量。在这种情况下，树将进行拆分，使每个组的均方误差最小。

2020-11-02 13:54:41

Python可视化决策树
每个数据科学家都需要的3种简单的异常检测算法
深入了解离群值检测以及如何在Python中实现3个简单，直观且功能强大的离群值检测算法。我确定您遇到以下几种情况：您的模型表现不理想；您不禁会注意到有些地方似乎与其他地方有很大的不同。恭喜，因为您的数据中可能包含异常值!

2020-11-02 13:44:35

算法数据科学Python
9.04亿网民真实数据曝光，超7成月收入竟不到这个数？你是哪类？
人口普查是一个关系全民的大事，十年一次的全国人口普查将于11月1日正式开启。我国人口已突破14亿，随着移动互联网的发展，我国网民已破9亿，而这里有一个扎心的数据，七成网民月收入不足5000元。

2020-11-02 10:06:29

数据分析网民收入
Hive 如何快速拉取大批量数据
用hive来做数仓类操作，或者大数据的运算，是没有疑问的，至少在你没有更多选择之前。当我们要hive来做类似于大批量数据的select时，也许问题就会发生了变化。

2020-11-02 09:53:13

Hive数据算法
多快好省地使用pandas分析大型数据集
本文就将以真实数据集和运存16G的普通笔记本电脑为例，演示如何运用一系列策略实现多快好省地用pandas分析大型数据集。

2020-11-01 16:53:31

pandas数据分析数据集
如何选择数据分析可视化工具？Excel, Tableau还是Power BI？
正确分析使用数据可能会挖到宝藏。那么，作为个人或公司，如何选择分析和可视化数据的工具？在本文中，我们从各个方面比较三个工具的功能。

2020-11-01 16:49:51

数据分析可视化工具数据
每个数据科学家都必须了解的5大统计概念
以下是每个数据科学家都应该知道的前五个统计概念：描述性统计，概率分布，降维，过采样和欠采样以及贝叶斯统计。

2020-10-31 22:04:39

统计和数据科学数据科学家
Python数据可视化，seaborn如何做出非常规图表
这一节我们就来看看，如何使用 seaborn 生成标准图表，然后结合 matplotlib 做出定制效果。特别是多系列的情况下，会有一些技巧。

2020-10-31 17:13:04

Python可视化Seaborn
新疆喀什疫情｜疫情之下：大数据的洞察力
本次抗疫主要是利用大数据的联动优化信息采集流程，对个人数据充分挖掘，实时将个人的外出轨迹、健康档案、电子病历、就诊记录、目前健康状况等与疫情相关的信息自动上传到全民疫情防治信息平台。

2020-10-31 10:17:20

大数据大数据洞察大数据采集
鸿蒙HiSpark Wi-Fi IoT开发套件试用02（开发环境）
文章由鸿蒙社区产出，想要了解更多内容请前往：51CTO和华为官方战略合作共建的鸿蒙技术社区https://harmonyos.51cto.com/#zz

2020-10-30 17:57:11

鸿蒙HiSpark
“大数据”来了，机关餐饮浪费“销声匿迹”
“有了订餐功能，能提前能看到1周之内的菜单，我们可以根据情况计划用餐，食堂也能提前知道用餐人数，避免做多了浪费。”锦州市信息中心职工杨天虹说，现在自己已经习惯了每天上班先订午餐。

2020-10-30 11:39:14

大数据餐饮技术
大数据、人工智能与法律职业的未来
法律是人类最古老的学科，人类历史上第一部成文法典《汉穆拉比法典》出现在3800多年以前。

2020-10-30 09:56:45

大数据人工智能法律
深度对比Apache CarbonData、Hudi和Open Delta三大开源数据湖方案
今天我们就来解构数据湖的核心需求，同时深度对比Apache CarbonData、Hudi和Open Delta三大解决方案，帮助用户更好地针对自身场景来做数据湖方案选型。

2020-10-30 09:27:25

开源技术 数据
HDFS分布式存储中NameNode 和DataNode 有什么区别？
目前市场中，HDFS分布式存储系统是很热门的讨论话题，各种企业也倾向于搭建分布式存储系统。

2020-10-29 18:53:38

HDFSNameNodeDataNode
大数据比赛篇：当足球走进高科技时代 用“大数据”解读比赛
在现代科技的推动下，大数据逐渐渗透到体育领域，大数据技术在足球这项世界第一大运动中更是被广泛应用。之前国足与马尔代夫的比赛之后，网上就曝出了赛前鲁能通过自己的大数据系统将执法主裁的资料分享给了国足团队以便球员了解该裁判的执法风格。

2020-10-29 11:28:23

大数据足球技术
终于有人把数据中台讲明白了
要建设数据中台，我们首先需要明确什么是数据中台，以及数据中台能为企业带来什么价值。

2020-10-29 06:09:37

数据中台数据大数据
使用PandasGUI进行探索性数据分析
在本文中，我们将探索Pandasgui，并了解如何使用它来自动化探索性数据分析过程，并节省我们的时间和精力。

2020-10-28 18:28:12

Pandas数据分析GUI
大数据揭秘：9所中国优秀大学毕业生都去哪了？
教育部今年发布的数据显示，2020届高校毕业生874万人，同比增加40万人，毕业生人数再创历史新高。如此庞大的毕业生群体离开校园，他们的去向越发引人关注。

2020-10-28 15:40:51

大数据教育高校
现在的大数据有多么可怕？
处于信息时代的我们是幸福的，我们能足不出户的享受科技进步带来的便捷，也能在许可的范围之内随心所欲地浏览海量信息，可是你有没有发现下面几个细节？

2020-10-28 15:06:12

大数据科技技术
远不止编码：如何规划组织数据科学及分析项目？
执行一个数据科学/分析项目从来不是一件容易的事情。一个成功而全面的分析项目远远不止是编码，它还涉及复杂的设计和大量的沟通。

2020-10-28 13:56:07

数据科学编码数据分析
大数据中心在“新基建”情境下的：意义、困境和进路
近期，大数据中心作为“新基建”的七大领域之一，成为对抗疫情、复苏经济和推动社会稳定发展的重要武器，引发了政产学研用各个领域的广泛关注。大数据中心既是新一代信息基础设施的“粮仓”，自身也是“新基建”，更是其他领域“新基建”的运行基石，对推动数字经济高质量发展、加速智慧社会高效治理具有重要作用。

2020-10-28 11:03:01

大数据
城市又堵了起来，用大数据能治根吗？
日前举办的人工智能与数字经济广州高峰论坛上，如何用互联网、大数据、人工智能等技术手段推进社会治理体系现代化成为专家学者和企业界代表的关注焦点。

2020-10-28 09:42:34

大数据人工智能技术
vlookup函数查询出错怎么办？全部4种错误类型都在这
vlookup函数相信只要使用过Excel的同学都知道，这个函数在进行表格数据查询匹配的时候，运用的范围可以说是最为频繁的一个。我们经常会使用vLookup函数进行各类的数据查询，但是数据查询过程中，我们也经常会发现，函数查询有时候也会出错，下面我们就来学习一下vlookup最为常见的错误类型。

2020-10-28 09:41:20

vlookup函数Excel
如何为公民分析家时代设计大数据用户体验
Gartner表示，简化大数据平台是几乎所有分析软件供应商的主要目标。 这主要是为了满足Gartner所说的"公民分析家"的需求，其数量预计将比正式合格的数据科学家快400%。

2020-10-28 08:17:23

大数据用户体验Gartner
数分工具鄙视链：Python成老大，Excel小弟都称不上？
不光是数据分析行业，在程序员、产品经理等行业中都存在这样的鄙视链。也有不少人和公司，遵从着这样的鄙视链现象，通过这样的鄙视链进行岗位的分级，或者作为选人招聘的门槛标准

2020-10-27 19:05:46

PythonExcel数据分析
应对全球变暖，数据分析是不可或缺的工具
过去20年里，有近70%的极端天气是因为气候变化而造成的。正如联合国前秘书长潘基文所说：“我们是结束贫困的第一代人，也是能够采取措施避免气候变化最坏影响的最后一代人。如果我们没有履行自己的道德和历史责任，后代将严厉地批判我们。”

2020-10-27 12:43:53

数据分析技术工具
企业如何在疫情环境中使用大数据分析来协调业务?
当冠状病毒疫情在2020年初在全球爆发时，许多企业和政府部门发现处于一个前所未有的危机中，他们努力在适应和调整。

2020-10-27 10:37:10

大数据数据分析机器学习
还在窃取用户信息，特朗普带“剑桥分析”重返大选，这招还管用吗
在“大数据”这个概念还没有完全火起来的时候，特朗普团队就运用到了大数据的“魔力”。

2020-10-27 07:57:14

特朗普大数据
如何用好云原生数据湖？
阿里云从2018年起就开始布局数据湖，推出了云原生数据湖分析Data Lake Analytics(DLA)，从数据湖管理(帮助客户高效管理构建数据湖)，Serverless Spark(提供高性价比的大规模计算)，Serverless SQL(提供高性价比的在线交互式分析)三个方面帮助客户挖掘数据价值。

2020-10-27 07:08:06

云原生数据湖存储
上一页 1 ··· 6364656667 ··· 187
点赞

51CTO技术栈公众号

业务
速览
在线客服