51CTO首页
AI.x社区
博客
学堂
精品班
直播训练营
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

大数据

8805内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8805 条
2023年大数据在物联网中的作用
本文将讨论物联网和大数据如何互连、大数据在物联网中的作用、在物联网中使用大数据的优势，以及企业在实施这项技术时可能面临的困难。

2023-08-03 10:07:36

大数据物联网
15个超级棒的外文免费数据集，学习数据分析不愁没有数据用了！
Academic Torrents是一个比较年轻的网站，旨在共享来自科学论文的数据集。因为它是一个较新的站点，所以很难判断最常见的数据集类型是什么样的。目前，它有大量缺乏上下文的有趣数据集。

2023-08-03 08:15:20

外文免费数据集
如何使用数据版本控制管理数据湖中的模式验证 译文
开源的数据版本控制工具可以帮助用户管理跨多种格式的模式演变、数据转换和兼容性检查。

2023-08-03 08:00:00

数据湖模式验证
数据结构如何解决供应链挑战
数据结构方法使供应链领域的企业能够利用大数据的力量，实现实时可见性，优化运营并推动战略决策。通过提供统一和可扩展的数据管理方法，数据结构在日益复杂和数据驱动的供应链环境中提高了效率、敏捷性和竞争力。

2023-08-03 06:58:46

数据结构企业
数据归因模型，该如何搭建？
企业经营也是同理，我们不是搞科学研究的，而是来挣钱的，所以真实原因可能永远无法知道，但是只要经营指标是向好发展，业务能不断改善，目的就达到了。

2023-08-02 13:07:00

数据归因模型
Seaborn的15种可视化图表详解
可视化是以图形形式表示数据或信息的过程。在本文中，将介绍Seaborn的最常用15个可视化图表。

2023-08-01 16:01:59

可视化Seaborn
为什么合成数据是人工智能的必备条件？
合成数据在数学和统计上反映了现实世界的数据。但它不是从现实世界中收集和测量的，而是通过计算机模拟、算法、简单规则、统计建模、模拟和其他基于小型、匿名的现实世界样本的技术创建出来的。

2023-08-01 14:59:35

人工智能合成数据
用户细分，该怎么分才最见效果
虽然数据、统计学给我们提供了很多工具（分类工具、降维工具）可真正用到实处还是得考虑具体业务场景。我们从来都不缺少会背课本的学生，我们缺少的是会考虑实际场景的分析人员。

2023-08-01 12:45:39

用户细分消费习惯
时序与因果模型在复杂仓储控制策略的前沿探索
本文将分享序列数据的因果推断在仓储管理上的应用，包括解决问题上的思路和相关技术。因果分析是一种把握和挖掘数据背后原因和结果的技术，因为它有很好的模型可解释性，所以对于可视化以及复杂商业过程会有很大的帮助。

2023-08-01 08:13:47

因果分析仓储管理
五分钟读懂，如何搭建经营分析模型
如果分析不深入，分析师就只能笼统地喊：“差旅费高了/销售费用高了，要控制”，这完全无法落地。更有甚者，业务部门摆烂，说：“业绩做不好，都怪你们瞎胡控制费用”。搞得分析师灰头土脸。

2023-07-31 11:37:05

经营分析模型
能源效率的未来：大数据如何重塑行业
大数据改变能源效率格局的关键方式之一是通过智能电网的发展。这些先进的电力网络利用数字技术和数据分析来更有效地监控和管理能源流动。通过收集和分析来自智能电表、传感器和天气预报等各种来源的数据，智能电网可以优化能源分配、减少浪费并更好地整合可再生能源。

2023-07-31 10:53:12

大数据能源效率
海量数据，三行Python代码直接获取！
说起数据分析，我们想到的往往是各种算法、思路，图表等等，但是正所谓巧妇难为无米之炊，没有数据，何谈分析。

2023-07-31 08:02:28

数据分析算法，图表
小米集团基于Apache Doris的OLAP实践
本文将分享小米集团基于Apache Doris的OLAP实践。文章将从小米集团OLAP系统的选型历史以及当前的应用现状入手，分享小米数据生态中的Doris以及Doris在小米用户行为分析场景的实践。

2023-07-31 07:49:03

OLAP系统Doris
数据分析项目是什么？该怎么做？
即使是数字本身，也很难体现价值。比如原因分析，即使不看数据，业务自己也能猜到几条原因。如果仅仅局限在业务提一个假设数据验证一个，那就跟叼飞盘的汪子没啥区别。虽然自己跑得辛苦，人家还认为你就是个打杂的。

2023-07-29 22:27:44

数据分析项目
详细全面：数据分析师成长攻略
评估1次活动效果是相对简单的，作为数据分析师，只要能理清活动目标，活动达成目标的业务逻辑，就能快速输出评估结果。这是数据分析师们应优先培养的能力。

2023-07-28 14:48:00

数据分析效果
用户路径数据分析与挖掘
本文将介绍用户路径相关的分析与挖掘。首先会介绍业务实践过程中遇到的问题和所做的尝试，接着将介绍根据业务实践沉淀出来的开源框架SessionAnalytics。

2023-07-28 08:11:28

数据分析开源框架
大淘宝模型治理
本文将分享大淘宝数据模型的治理实践，主要包括四个部分（大淘宝已改名淘天集团）：背景及问题， 解决方案，模型治理，未来规划。

2023-07-28 08:08:09

大淘宝数据模型数据治理
数据集静态水平分类 译文
根据数据的变化频率，明智地选择正确的解决方案来存储数据。我们在此定义了从枚举到表格的三个层次。

2023-07-27 15:38:52

数据集
用户画像，这么做才能促进业务
本篇里审时度势四个字出现了3次，这是把数据理论应用到企业里很重要的一环。在企业里推动项目需要找准切入点，配合业务节奏，实现业务上效果，才能吸引大家的注意，提升数据分析的地位。​

2023-07-27 13:44:19

业务用户画像
数据是建筑物优化能源绩效的关键
随着房地产行业专注于如何以更少的资源做更多的事情，并做出更明智的资本规划决策以优化预算，使用数据更好地了解建筑物将是充分利用现有资产的关键。

2023-07-27 10:26:59

数据能源
HBase Compaction 原理与线上调优实践
本文对 HBase Compaction 的原理、流程以及限流的策略进行了详细的介绍，列举了几个线上进行调优的案例，最后对 Compaction 的相关参数进行了总结。

2023-07-27 06:38:52

HBase大数据
如何在数据分析中拥抱人工智能
人工智能等技术是革命性的，特别是对于数据分析等行业而言。生成式人工智能需要数据才能发挥作用;它训练系统学习数据中的模式、关系和结构。这最终将作为模型生成新的、有意义的结论的基础。因此，生成式人工智能需要数据才能发挥作用。

2023-07-26 15:52:05

数据分析人工智能
数据分析这么干，运营吵架少一半
今天我们就先看其中最大的一个问题。运营的工种有很多（如下图），其中活动运营是策略性最强，和数据分析关系最紧密，也是怼的最多的岗位，今天就用它举例子。

2023-07-26 12:58:32

数据分析运营策略
建设银行隐私计算实践
本文将分享建设银行在隐私计算领域的一些应用实践。建行上海大数据智慧中心是2015年成立的一支专门服务于建行内部的数据分析和数据挖掘团队，职责是为全行的各业务条线、各个分行、各个子公司专门来提供数据咨询服务、大数据平台技术和数据算法的支持。

2023-07-26 07:21:27

隐私计算数据分析
Kyligence：以 AI 变革组织运营与管理，开启“人人用数”时代 原创
秉持“改变人类使用数据的习惯”理念的 Kyligence，也在不断进化，以“变革组织运营与管理”为目标，基于不同人群的用数需求研发智能数据产品，力求降低数据的使用门槛，帮助企业客观地分析数据，助力企业的业务决策和经营管理。

2023-07-20 17:15:42

KyligenceAI数据分析
Cloudera大中华区技术总监刘隶放：更准确的AI需要更准确的数据 原创
企业需要在合适的情境中基于自身专有数据构建交互体验，并且不与外部服务共享他们的数据

2023-07-20 10:38:35

可观测性人工智能
淘宝直播APP用户增长实践
本文将分享淘宝直播APP（点淘）的用户增长实践。近两年来，阿里在内容方向投入了大量精力，而点淘则是内容方向的一个重要组成部分。点淘依托直播和短视频生态，通过短直联动的方式来打造短视频种草和直播拔草的一个商业形态。

2023-07-20 08:39:09

DPA+RTA数据体系
实时物化视图：加速大规模时间序列数据查询的利器
本文将分享如何在产品中实现实时物化视图，重点聚焦于加速大规模时间序列数据查询。实时物化视图就是一种适用于时间序列数据的预计算加速过程，其核心思想是将历史物化数据与计算结果保留下来，并在新数据到来时进行增量更新。在高效地管理和维护物化操作的同时，减少计算的开销。

2023-07-20 08:28:01

实时物化视图时间序列
如何使用Python、Dash和RisingWave可视化实时数据 译文
本文对如何使用Python、Dash开源库和RisingWave对实时数据实现可视化进行了介绍。

2023-07-20 08:00:00

可视化数据Python
时间序列的季节性：3种模式及8种建模方法
分析和处理季节性是时间序列分析中的一个关键工作，在本文中我们将描述三种类型的季节性以及常见的8种建模方法。

2023-07-19 15:28:10

时间序列分析季节性
B站埋点数据标准化实践
用户行为数据管理和对应的行为数据分析的关系十分紧密，如何在产品层面上应用好，前置条件是埋点数据需要做到标准化管理、标准化应用，这是很多行业内公司及团队都会碰到的课题。本文将和大家一起分享B站在埋点标准化方面的实践经验。

2023-07-19 08:58:00

数据管理数据分析
做有价值的经营分析，而不是记流水账
报表复杂和报表能讲出问题是两码事。看回上边的例子，如果解析销售情况，光看收入结果，肯定无法了解问题是怎么来的，得深入到过程才行。并且，新客户/老客户，大客户/中小散客，可能有不同的销售方式，要看的数据也不同。

2023-07-17 11:32:46

经营分析数据销售
关于数据湖的五大误解及规避方法 译文
在大数据领域，目前主流存储、处理和分析大量结构化和非结构化数据的解决方案是采用数据湖。然而，对数据湖的误解和质疑可能会阻碍企业利用数据湖处理数据。本文旨在消除大众对数据湖的一些误解，提供见解和最佳实践，帮助大众应对数据湖的复杂性，释放数据湖真正的价值。

2023-07-14 14:58:20

数据湖
我搭建了一个好用的数据运营体系
为什么会这样？因为从本质上看，运营是个辅助性工作。理论上，如果产品力足够强大，商品天下无敌，那根本没运营啥事。——用户自己就抢着买到断货，玩得乐不思蜀了，运营啥运营。

2023-07-14 12:02:29

数据运营体系
一个案例，看懂数据分析全流程
怎么确认卖手抓饼和上班哪个挣得多呢？你可能直观地想到：打工一个月多少钱是清楚的，卖手抓饼一个月赚多少钱不清楚。于是，你写下了如下图对比表，然后开始收集数据。这个动作，用专业话说叫：确定分析目标。

2023-07-13 12:21:18

数据分析统计
数据湖在快手的生产实践 原创 精选
今天的分享分为四个部分：首先介绍传统离线链路，它存在哪些痛点；第二部分引入数据湖的特性；第三部分是通过快手数据湖几个典型的业务场景来说明如何基于数据湖技术重塑离线链路的生产；最后一部分介绍近期工作和长远规划。希望通过本次分享能够让大家了解数据湖技术在重塑离线生产方式中的关键作用。

2023-07-12 16:07:50

链路数据湖技术
别再喊“要提升”，这才是有用的销售分析报告
某互联网交易平台，通过线下销售团队招揽企业入住。目前销售部领导找到数据分析师，希望能做一些精准分析，为一线销售赋能，提升销售生产力。问：这个数据分析项目该怎么做？

2023-07-12 13:06:44

销售分析报告
基于 Apache Paimon 流式数据湖提升数据处理的时效性 原创
在近日举办的WOT全球技术创新大会2023·北京站的《大数据技术创新》专场中，来自阿里云的高级技术专家李劲松带来了主题为《Apache Paimon 流式数据湖 V0.4与后续展望》的精彩分享，从理论、实践和未来发展方面详细介绍了Apache Paimon 流式数据湖。​

2023-07-12 12:02:06

WOT大数据流式数据湖
湖仓存储系统设计剖析和性能优化
本文将从元数据、Merge-On-Read等核心设计方面来剖析湖仓存储系统，对比当前流行的三种格式Delta Lake、Hudi、Iceberg的设计差异和优缺点，并分享我们在读写性能优化方面所做的思考和实际优化案例。

2023-07-12 08:44:46

湖仓存储系统数据湖
数据应该是云计算世界中的重要角色 译文
如果没有恰当的数据治理、互操作性和访问控制措施，企业将数据商业价值最大化的可能性就会微乎其微。

2023-07-11 16:36:28

数据管理
基于Lakehouse架构实现湖内建仓实践经验
现在很多企业都对数据湖存在一些误区，从上图左侧对数据湖的不同定义（红色字体标识）可以看出，数据湖并不像大家想象的那样。误区主要分为以下三种：第一种认为数据湖仅用来进行海量的存储；第二种认为数据湖是用来处理非结构数据的，不处理结构化数据；第三种认为数据湖仅可以用来做贴源层，不能建数仓。

2023-07-11 10:23:00

Lakehouse数据湖
黑匣子九问，带你揭秘黑匣子
作为飞机数据客观、真实、全面的记录者，黑匣子是飞机失事后查明事故原因的最可靠、最科学、最有效的手段。伴随着航空事业的发展，黑匣子在飞机日常安全维护、飞行状态监测、消除事故隐患以及故障定位方面也发挥着越来越重要的作用，甚至可以说充当着飞行过程中不可或缺的角色。

2023-07-11 07:59:18

黑匣子科学飞机失事
PySpark 数据类型定义 StructType & StructField
在本文中，云朵君和大家一起学习了 SQL StructType、StructField 的用法，以及如何在运行时更改 Pyspark DataFrame 的结构，将案例类转换为模式以及使用 ArrayType、MapType。

2023-07-10 18:48:29

PySpark数据结构
大数据时代必备技能——分库分表的原理与应用
分库分表是一种常见的数据库扩展方案，可以通过将数据分散到多个物理数据库中，并按照一定的规则划分数据，来提高系统的性能和并发能力。下面，我将详细介绍分库分表适用场景、好处和坏处，以及业内常用的解决方案和执行流程。

2023-07-10 09:42:45

分库分表大数据
Hadoop on K8s 编排部署进阶篇
Kubernetes（通常简称为K8s）是一个开源的容器编排平台，用于自动化部署、扩展和管理容器化应用程序。它提供了一种强大的方式来管理容器化应用程序的资源和生命周期。

2023-07-10 07:22:16

Hadoop开源平台
野生数据分析师脱困指南
从本质上看，数据分析是个技术工种，不像运营/产品，非常依赖成功案例。作为数据分析师，有能力提取/加工数据，了解常见的业务场景，能梳理清晰需求，能搭建看板/模型，能做好测试，就足够我们安身立命了。

2023-07-08 23:05:01

数据分析运营
智慧医疗：大数据分析对医疗保健的影响
大数据分析在医疗保健领域最重要的影响之一，是其改善患者护理的潜力。通过分析患者的病史、基因数据、生活方式选择和其他相关信息，医疗保健提供者可以预测潜在的健康风险并开出个性化的治疗方案。这种方法被称为精准医学，旨在根据患者的独特特征制定治疗方案，提高护理效果并减少不必要的手术和药物。

2023-07-07 14:15:28

智慧医疗大数据
数据分析师，如何给自己找活干
数据分析想给自己找活干，要多了解公司数据现状，找到业务部门需要的数据，从报表开始逐步完善数据体系，并且要列清楚进度，一步步实现，让大家看到自己的努力，这样才是破局之路。​

2023-07-06 14:52:36

数据分析师SQL
大数据面临的六个挑战
本文阐释了大数据面临的6个挑战，还深刻探讨了云计算基础设施应该如何克服这些挑战。

2023-07-06 14:29:11

大数据
下一个数据战略的六个战略要点
根据麻省理工学院技术评论的调查，企业的数据战略支持重要的业务目标，包括促进销售、提高运营效率以及缩短上市时间，它还可以帮助企业开发新产品或进入服务市场，以及改进创新、维护实物资产和ESG。

2023-07-05 10:30:03

数据战略大数据
上一页 1 ··· 89101112 ··· 177
点赞

51CTO技术栈公众号

业务
速览
在线客服