51CTO首页
AI.x社区
博客
学堂
精品班
直播训练营
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

大数据

8799内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8799 条
大数据对企业管理数据决策的影响
所谓大数据是指具有一定功能的庞大数据集。从"巨人"的量词中，我们可以清楚地认识到，大数据的数据集在数量和规模上都是相当大的，这远远超出了人们的理解。大数据的采集、存储、管理和分析都需要使用专业的软件工具和硬件设备，否则普通的设备工具就不能满足大数据分析的功能要求。

2021-06-29 09:50:35

大数据大数据技术
SQL数据分析系列之视图
设计良好的应用程序通常会在保持实现细节私有性的同时公开一个公共接口，从而在不影响终端用户的情况下支持将来的设计变动。在设计数据库时，通过保持表的私有性并允许用户仅通过一组视图访问数据，你可以获得类似的结果。

2021-06-29 07:04:39

SQL数据视图
数据分析能力分级模型，你在哪一级？
很多做数据的新人都有这个困惑，今天陈老师给大家解这个局。这里问题的核心在于：如果不能按自己的建议做项目，是不是就不能提升数据分析能力了?回答当然是：否!数据分析的能力晋级分为四个层级，所谓“按我的意见做”根本就不在这个晋级体系里。

2021-06-28 17:30:53

数据分级模型
从人工智能到团队合作：数据科学家的七项关键技能
美国劳工统计局将数据科学家列为未来增长最快的15个职业之一，随着数据日益成为所有企业的命脉，数据科学家不仅需要具备过硬的知识和技能，还需要具备强大的商业头脑。

2021-06-28 14:13:26

人工智能数据科学家数据
如何避免被大数据“杀熟” 专家：改变信息失衡
杜绝大数据杀熟，要从严格执法方面入手。有关部门应依据相关法律法规严格执法。电子商务经营者要严格遵守电子商务法，应当真实、准确、及时地披露商品或者服务信息，保障消费者的知情权和选择权。

2021-06-28 13:34:06

大数据大数据监管数据安全
Flink 和 Iceberg 如何解决数据入湖面临的挑战
数据实时入湖可以分成三个部分，分别是数据源、数据管道和数据湖（数仓），本文的内容将围绕这三部分展开。

2021-06-28 09:34:55

数据湖大数据Flink
年中盘点：2021年炙手可热的10家数据科学和机器学习初创公司
当今企业正在利用不断增长的数据获得竞争优势，也就是采用数据科学、人工智能、机器学习、甚至是深度学习领域的新兴技术来准备和组织大数据。

2021-06-27 17:24:01

数据科学机器学习初创公司
保险业数字化转型的人才困境
团体保险不是一个具体的险种，而是一种承保方式。它以团体为保险对象，以集体名义投保并由保险人签发一份总的保险合同，保险人按合同规定向其团体中的成员提供保障的保险。团体保险一般有团体人寿保险，团体年金保险，团体意外伤害保险和团体健康保险等种类。

2021-06-25 09:58:38

数字化健康医疗
数据爬取亟需规范 平台又该承担何责？
近年来，数据泄露案件频发。有专家指出，尽管企业在其中也是受害者之一，但是从个人信息保护的角度，只要用户因信息泄露遭受损失，平台需肩负一定责任。

2021-06-24 09:41:43

数据爬取爬虫平台
技术创新普惠千行百业 华为云助力企业解锁数据价值 原创
数据无疑已经成为数字经济时代的核心生产要素，数据有效应用正在推动经济社会发展，推进各行各业数字化转型进程。华为云坚持以技术创新普惠千行百业，助力企业实现全面云化、全栈智能，赋能行业数字化转型。

2021-06-23 17:47:12

华为云大数据湖仓一体
如何实施有效的智能主数据管理策略
虽然对不同来源的数据进行收集和管理现在是很多企业的标准做法，但数据很可能会被分散、孤立甚至没有进行清理。任何不准确的数据都会阻碍企业跨渠道的决策能力，将对业务增长和客户满意度带来不利影响。特别是在当前情况下，许多企业不得不面对数据管理流程带来的损失。

2021-06-22 14:10:16

主数据管理数据治理
大数据开发技术之Hadoop组成三大架构
Hadoop在我们大数据培训课程中占据着举足轻重的地位，被公认为是一套行业大数据标准开源软件，在分布式环境下提供了海量数据的处理能力。在所有的大数据培训机构都把它作为必备课，它不仅是在大数据培训行业而且几乎所有主流厂商都围绕Hadoop开发工具、开源软件、商业化工具和技术服务。

2021-06-21 17:04:55

大数据Hadoop
将让业务繁荣发展的十大数据分析趋势
通过使用先进的分析和技术，企业可以轻松预测客户需求、个性化内容、提高收入并实现目标。企业正在采用分析和系统统计推理来做出提高效率、风险管理和利润的决策，同时保持库存、定价解决方案以及招聘人才。

2021-06-21 14:04:18

大数据人工智能大数据分析
企业级数据中台的终局剖析
数据中台一定不仅是一个单体的软件能够形成的，它是一个体系化的企业级数据加工厂，所以数据中台的建设也是需要顶层规划，分步建设的。

2021-06-21 11:57:04

数据中台数字化转型数字化
快手阿里美团数据工程师齐聚 分享数据架构实践
近日，快手数据平台部联动快手中学在快手总部举办快手大数据架构技术交流会，交流会邀请了来自快手、阿里巴巴、美团的5位技术大咖，为现场和线上听众带来了一场技术分享盛宴。

2021-06-21 11:22:29

数据架构实践
为什么数据和分析对农场至关重要
从1837年引进钢犁到采用GPS、物联网和人工智能等先进技术，农民们一直在研究技术和创新如何提高他们的工作效率。这一点极其重要，因为他们肩负着一项艰巨的任务：为全球77亿人创造食物、燃料和纤维。

2021-06-21 09:00:34

大数据物联网
什么是数据驱动设计？收下这篇入门科普！
在这篇文章中，我们将深入探讨什么是数据驱动设计，以及为什么它能更好地推动用户体验的提升 。与此同时，我们还将了解为什么它能帮助我们做出更实际的决策。

2021-06-18 12:39:12

数据驱动设计设计师收集数据
五分钟技术趣谈 | 数据分析中的客户端埋点
在传统的Web APP和 Native APP开发的产品中，埋点从技术的角度来说未必多深奥，但从业务的角度来说要做到设计规范、流程高效和保证质量却很难。每个业务版本中都可能会有数据埋点工作，那工作中的数据埋点是怎么运转的呢?

2021-06-17 13:35:23

数据埋点分析客户端
数据分析成企业“杀手锏”，提升分析力就看这5招
优秀的工具、出色的数据管理和良好的策略是数据分析取得成功的关键。以下这些最佳实践可以帮助企业将不断增长的数据转化为更好的业务决策。

2021-06-17 13:10:47

数据分析自助式分析数据
获客分析的三大痛点，如何解决？
之所以要做获客分析，关键点还是在于涉及钱，涉及到预算，这往往是我们要首要分析的一个事情 ，所以我们需要对流量有一个清晰的认知，从数量、质量以及到后续的转化都能了如指掌，花同样的钱能够获得更好的效果。

2021-06-17 10:19:48

获客分析数据流量
Google BigQuery是大数据分析的未来吗?
Google BigQuery是一项运行在谷歌云平台中的用于收集和分析大数据(也称为数据仓库)的服务。它于2011年推出，因其采用无服务器架构而备受赞誉，该架构支持高度可扩展和快速提供的结构化查询语言(SQL)分析。

2021-06-15 14:07:42

Google BigQ大数据大数据分析
五种Pandas图表美化样式汇总
我们在做excel表格的时候，常常会对重要数据进行highlight，或者用不同颜色表示数据的大小。这在Pandas中也是可以实现的，而且非常简洁。

2021-06-15 09:25:39

数据工具图表
在Spark中，什么叫内存计算?
由于计算的融合只发生在 Stages 内部，而 Shuffle 是切割 Stages 的边界，因此一旦发生 Shuffle，内存计算的代码融合就会中断。

2021-06-15 07:04:59

内存SparkStages
20款优秀的数据可视化工具 (建议收藏)
下面列举的二十个数据可视化工具，无论你是准备制作简单的图表还是复杂的图谱或者信息图，这些工具都能满足你的需要。更加美妙的是，这些工具大多免费。

2021-06-11 17:45:57

大数据可视化工具
汽车之家：基于 Flink + Iceberg 的湖仓一体架构实践
湖仓一体的意义就是说我不需要看见湖和仓，数据有着打通的元数据的格式，它可以自由的流动，也可以对接上层多样化的计算生态。

2021-06-11 14:01:51

数据仓库湖仓一体 Flink
数据的“敏捷制造”，DataWorks一站式数据开发治理范式演进
企业大数据技术发展至今，历经了两次蜕变。第一次蜕变从最初的“小作坊”解决大数据问题，到后来企业用各类大数据技术搭建起属于自己的“大平台”，通过平台化的能力完成数据生产力的升级。

2021-06-11 13:56:27

大数据DataWorks数据开发
能源的未来建立在数据之上
大约70%的电力变压器25年以上，60%的断路器30年以上，70%的配电线路25年以上。这种现象在全球许多国家都一样。

2021-06-11 10:27:33

能源物联网数据之
数仓 | 该如何理解数据仓库的建设
在大数据时代，随着机器学习和人工智能的兴起，这个定义需要做一些补充：数据仓库不只是用于构建支持管理决策的商业智能BI的基础, 也是大量的机器学习和人工智能算法的底层基础之一。

2021-06-11 07:26:16

数据仓库机器学习
大数据现状与趋势：大数据应用、治理与技术
全球范围内，研究发展大数据技术、运用大数据推动经济发展、完善社会治理、提升政府服务和监管能力正成为趋势。下面将从应用、治理和技术三个方面来讲讲当前的大数据的现状与趋势。

2021-06-10 19:10:32

大数据大数据应用大数据技术
剖析数据平台：新一代数据湖 译文
架构的重要之处不在于供应商或特定产品，而在于所用组件的功能。产品的选择取决于许多的因素。

2021-06-10 14:01:38

大数据数据平台数据湖
轻松三步搞定数据统计分析：统计+分析+可视化！
我们都知道，数据是支撑决策的重要依据，于是我们可以看到，几乎所有的产品，都会具有数据统计分析的功能模块。往大了说，比如数据中台;往高端了说，比如数据大屏、数据看板、数据驾驶舱;往本质了说，其实就是数据的统计分析。作为一个非数据型产品经理，或者是初级产品经理，该怎样设计这个功能模块呢?

2021-06-10 09:53:04

数据统计统计分析数据
详解新一代数据湖--数据平台 译文
本文系统性地向您介绍了数据平台的模型、获取模式、获取引擎服务、数据湖即服务、以及数据湖的功用与进化。

2021-06-10 09:00:00

数据湖架构数据平台
手把手教你使用Python打造绚丽的词云图
相信大家对这个概念比较陌生，它其实就是指的是对某一段文本中出现频率最高的关键词进行特殊描绘，过滤到太多没用的字眼，以此达到视觉上的突出，让人一看就知道这篇文章讲的什么。

2021-06-10 07:49:28

Python词云图wordcloud
Hadoop 数据迁移用法详解
需要将数据源集群的/etc/hosts中的hadoop节点拷贝到目标集群所有节点的/etc/hosts中，保证新集群所有节点可以ping同老集群所有节点;

2021-06-09 17:51:12

Hadoop数据迁移
大数据为企业带来的6个好处
当企业高管听到“大数据”这个术语时，他们自然而然地想到的是数量惊人的可用数据。这些数据来自电子商务和全渠道营销领域，或来自物联网上的连接设备，或来自生成有关交易活动的更详细信息的应用程序。

2021-06-09 14:37:10

大数据互联网大数据应用
易企信多功能协同 推动拓客、商调业务体验升级
如何全面、深入的了解企业以及企业群，对于以ToB型业务为主的公司、金融类行业机构以及某些政府部门来说都是重中之重。

2021-06-09 11:43:19

易企信数据AI
我为什么不建议你抄大厂的用户画像？
看到用户画像的标题，熟悉陈老师的同学就知道：我又要写标签建设的文章了。是滴，再厉害的用户画像也是一个个标签组成的，而标签建设恰好是当前非互联网大厂进行用户画像建设的最大瓶颈。

2021-06-09 11:28:04

用户画像标签
数据分析必知必会的Excel函数
数据分析虽然是以业务为主，工具为辅，业务为目的，工具为手段，但巧妇难为无米之炊，只有掌握了基础的工具才能够进行数据分析。

2021-06-09 11:06:00

数据分析Excel
数据分析值不值得学？
今天从我的感触来聊一下数据分析，为啥你要信我聊的？

2021-06-09 07:14:32

数据分析互联网运营大数据
别再用OFFSET和LIMIT分页了！
本文主要去理解 offset 为什么会在大数据量下的查询带来性能问题?思考完后，可以在思考下，如果分库分表，你会这么去分页呢?

2021-06-09 06:41:11

OFFSETLIMIT分页
数据猿发布《2021中国数据智能产业发展报告》
依据IDC发布的《数据时代2025》报告，全球数据量呈现出快速增长的态势，到2020年，全球数据量达到了60ZB，2025年将达到175ZB，接近2020年数据量的3倍。

2021-06-08 14:13:47

数据智能
Pandas 中实现聚合统计，有几种方法？
pandas是当前Python数据分析中最为重要的工具，其提供了功能强大且灵活多样的API，可以满足使用者在数据分析和处理中的多种选择和实现方式。今天本文以Pandas中实现分组计数这个最基础的聚合统计功能为例，分享多种实现方案，最后一种应该算是一个骚操作了……

2021-06-08 11:42:12

Pandas数据分析Python
阿里大数据云原生化实践，EMR Spark on ACK 产品介绍

2021-06-08 09:45:46

大数据云原生EMR Spark o
SQL、Pandas和Spark：如何实现数据透视表？
今天本文就围绕数据透视表，介绍一下其在SQL、Pandas和Spark中的基本操作与使用，这也是沿承这一系列的文章之一。

2021-06-08 09:18:54

SQLPandas数据透视表
面试官：说说对 Node 中的 Stream 的理解？应用场景？
流(Stream)，是一种数据传输手段，是端到端信息交换的一种方式，是有顺序的，是逐块读取数据、处理内容，用于顺序读取输入或写入输出.

2021-06-08 08:33:23

NodeStream数据
大数据、物联网、机器人和现代技术如何彻底改变零售业
零售业稳定增长的因素之一是数字化和现代技术的兴起，并由此催生了零售 4.0 。引进先进技术后，零售工作流程中的采购、库存管理、客户服务、账户和供应链管理等多个流程变得自动化。

2021-06-07 15:03:57

人工智能物联网机器人
数据分析，到底要懂多少业务
同学们经常听到：数据分析要懂业务，到底懂多少才算懂业务?还有新手同学很困惑，说：“我就不懂，又能咋样!”今天系统讲解下。

2021-06-07 11:42:41

数据分析业务
数仓架构持续演进与发展：云原生、湖仓一体、离线实时一体、SaaS
数据仓库概念从1990年提出，经过了四个主要阶段。从最初的数据库演进到数据仓库，到MPP架构，到大数据时代的数据仓库，再到今天的云原生的数据仓库。在不断的演进过程中，数据仓库面临着不同的挑战。

2021-06-07 11:22:38

大数据数据仓库湖仓一体
如何基于MaxCompute快速打通数据仓库和数据湖的湖仓一体实践
纵观整个计算机科学技术领域，对于数据处理的技术主要分为四个阶段，数据库阶段、大数据技术探索阶段、大数据技术发展阶段、大数据普惠阶段。

2021-06-07 10:45:16

大数据数据仓库数据湖
通过扩展 Spark SQL ，打造自己的大数据分析引擎
Spark SQL 的 Catalyst ，这部分真的很有意思，值得去仔细研究一番，今天先来说说Spark的一些扩展机制吧，上一次写Spark，对其SQL的解析进行了一定的魔改，今天我们按套路来，使用砖厂为我们提供的机制，来扩展Spark...

2021-06-06 19:03:25

SQL大数据Spark
上一页 1 ··· 3637383940 ··· 176
点赞

51CTO技术栈公众号

业务
速览
在线客服