51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
信创认证
公众号矩阵
移动端
视频课免费课排行榜短视频直播课软考学堂
全部课程软考信创认证华为认证厂商认证IT技术PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9248内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9248 条
为什么现在是重新思考传统数据治理框架的时候了
在当今的数字时代，随着连接设备数量的增加和AI的崛起，各企业有充足的数据可供深入分析，然而，许多企业在有效利用这些数据资产和信息时遇到了困难，这成为了创建能够提供企业所需业务价值的数据驱动文化的主要障碍。

2024-07-05 15:42:54

数据治理大数据
”人货场”模型搞懂没？数据分析大部分场景都能用！
人货场三个维度之所以经常用，是因为这三者与用户行为有直接关系，并且商品属性、卖场属性、用户习惯都有一些天生的规律可循。因此很适合作为分析的基础，做深做细。一方面能对业务有更清晰的认知；另一方面，想建立更复杂的模型也有线索了。

2024-07-05 11:50:15

模型数据分析场景
11个开源免费的数据分析与可视化工具
本文推荐一些优秀的开源数据分析与可视化工具，可以在从数据清洗到可视化等过程提高工作效率。

2024-07-05 11:08:21

开源数据分析可视化工具
使用 Spring Boot 3.x + Flink 处理数据流中的延迟与乱序问题
在实时数据处理系统中，延迟和乱序是两个常见且棘手的问题。延迟是指数据在传输和处理过程中出现的时间滞后，而乱序则是指数据到达的顺序与其生成的顺序不一致。这些问题会直接影响数据处理的准确性和时效性。

2024-07-05 10:17:08

数据流系统CPU
模版+案例 | 数据指标体系的构建方法和流程
很多同学构建数据指标体系，喜欢堆砌数据。放一堆指标以显得丰富。可实际上如果不按业务流程找子指标，指标之间逻辑性就很差，看起来经常莫名其妙。更不要说，很容易弄出来类似“你幸福吗”这种稀奇古怪的玩意。

2024-07-04 12:10:50

数据指标体系
腾讯云发布自研大数据高性能计算引擎Meson，性能最高提升6倍
腾讯云发布全新自研大数据高性能计算引擎Meson。通过软硬一体加速和智能技术的综合应用，该引擎能显著为AI等场景下的大数据任务提供更优的计算性能，并节省更多计算资源。

2024-07-04 10:23:51

腾讯云大数据Meson
Bio-OS促进科研发展，助力生命科学领域创新发展 原创
为了进一步推动国内生命科学领域的交流与合作，构建一个“开放、创新、合作、共赢”的科研新生态，CCF开源创新大赛暨第二届Bio-OS开源开放大赛于近日盛大启动。

2024-07-04 09:00:00

Bio-OS生命科学生物信息
从拍脑袋到数据支持决策，这个分析师是怎么做到的？
数据驱动决策需要的是业务流程与数据紧密配合，领导层参与推动，才能实现的事。数据驱动决策，从来都不是一个神机妙算的世外高人，拿着数据口念咒语：“妈咪妈咪轰”就轰出来一个惊天地泣鬼神的结论，这是基本常识。

2024-07-03 12:01:36

数据驱动决策
2024年的治理革命：大数据和人工智能
2024年，在大数据和生成式人工智能(GenAI)融合的推动下，治理格局将发生深刻变革。这种革命性的结合正在重塑政府收集、分析和利用数据的方式，以做出明智的决策，应对复杂的社会挑战。

2024-07-01 12:45:57

大数据人工智能
腾讯云智能融合 AI+数据，重塑数据管理新范式 原创
在 WOT 全球技术创新大会《AI 与数据的智能融合》专场中，来自腾讯云的三位专家分享了腾讯云在数据管理与人工智能领域的技术成果和成功案例，并探讨二者如何智能融合为企业提供更高效、更智能的数据服务。

2024-07-01 11:03:05

WOT大会腾讯云
数据分析中十种常见的可视化图例 原创 精选
漏斗图（funnel chart）类似于漏斗的形状，其中每个部分逐渐变窄。分段垂直排列，以显示层次结构。在漏斗图中，每个分段对应于顺序过程中的一个步骤或阶段。它们说明了数据点在各个阶段中的进展。

2024-07-01 08:51:19

可视化数据分析漏斗
数据分析报告，如何写出“可执行”的建议？
唯独数据分析能力是可以通过学习、训练、实验、记录来不断提升的。所以基于数据提可行性建议，可能不会被采纳，但只会越来越被重视。​

2024-06-26 01:09:36

数据分析训练
赋能企业AI：肯睿Cloudera发布三款全新AI助手，让数据洞察更迅速、更可信
肯睿Cloudera推出AI驱动的 SQL、BI 和ML助手，致力于持续深化AI功能

2024-06-25 17:39:41

AI人工智能大数据
大数据框架及流批一体怎么选？
在日常生活中，我们通常会先把数据存储在一张表中，然后再进行加工、分析，这里就涉及到一个时效性的问题。

2024-06-25 13:08:31

大数据数据存储
谈谈利用主数据改进数据分析的重要性
在接触数据科学时，许多人专注于数据分析、数据可视化和数据收集，而忘记了整个数据科学的一个基本组成部分：主数据。

2024-06-24 21:18:48

数据分析
Kafka 中的大消息处理策略与 C# 实现
本文将深入探讨大消息对Kafka的影响，提出一些解决策略，并通过C#示例代码展示如何在实际应用中处理大消息。

2024-06-24 12:47:54

KafkaC#大消息处理
AI如何影响数据治理
收集、清洗、企业和保护这些数据以供AI和机器学习使用已成为一项独立的项目——在这个治理工作中，AI工具本身也扮演着重要角色。结果是，数据治理得到极大改善，惠及整个企业。

2024-06-21 11:11:22

AI大数据
揭秘打车软件，如何找到方圆 1km 以内的乘客
用geohash那结果显然是AB更近，但是实际上A与B的距离比AE、AC、AD都远。这其实是一个边缘性的问题........后续我会更新如何去避免这种问题的出现。

2024-06-21 08:44:37

打车软件边缘性
2031年大数据分析市场将达到近8460亿美元
SkyQuest预计，到2031年大数据分析市场的价值将达到8459.7亿美元，预测期内(2024-2031年)的复合年增长率为13.40%。

2024-06-18 10:48:58

大数据大数据分析
用DataOps释放数据项目的潜力 译文
各行各业的公司越来越关注收集数据，并寻找创新的方法以获得宝贵的见解。企业组织愿意投入大量的时间和资金来实现这一目标。

2024-06-18 08:00:00

DataOps数据项目
别当布谷鸟！这些方法能拯救你枯燥的数据日报
为什么每日指标会波动，这个很纠结的问题，提前准备了答案。通过打标签、梳理事件、定KPI，充分暴露波动背后的问题，引发深入思考。

2024-06-17 11:29:49

信息KPI标签
数据分析思路，总结了四个好用的模板
如果整体进度没很大问题，各子部门进展顺利，那么大家不会发表太多意见，看完后会说“很好，继续监控”。如果整体进度有问题，那么大家的思路会被引导到：“为什么A部门执行好，B部门不行？”上边去，这样就能做进一步的分析。

2024-06-13 11:54:03

数据分析模板进度
数据湖核心能力解析
本文将分享数据湖的发展近况。数据湖已成为企业数据平台架构的重要组成部分，传统的数据平台架构一般由数据湖、流式计算和 OLAP 引擎查询三个部分组成。这三个平台在以往通常是独立建设的，集群也是独立部署。

2024-06-13 08:10:18

数据湖流式计算OLAP 引擎查询
数据仓库中的七种建模方法及示例
试象一下，你是一家繁忙餐厅的分析工程师。每天，顾客都会预订、下订单并完成付款。所有这些数据都会流入餐厅的交易数据库，记录每次互动的详细信息。

2024-06-12 13:46:41

数据仓库大数据
WeOLAP：微信 OLAP 湖仓新场景优化实践
ClickHouse 在微信团队有着广泛应用，如实时报表、AB 实验和实时计算等，通过将 Hadoop 相关生态集成到 ClickHouse 中，性能得到了十倍到百倍的提升，能够做到万亿级数仓、亚秒级响应和稳定高可用。

2024-06-12 07:30:08

ClickHouseOLAP数据孤岛
太卷了吧，这份销售分析报告真是到位
如果发现问题，最好直接告诉一线：你这么做有用！还是上边的例子，如果真发现这个问题，可以先看签约率高的人做了什么。如果我们发现展示同行客户案例有效（提升5%左右），那直接把行业案例库作为功能做到产品里去。告诉他们：聊天的时候，点这个按钮，管用！

2024-06-11 13:57:41

销售分析数据互联网
大数据分析与GenAI：能源分配领域的变革力量
大数据分析与GenAI的结合无疑是一个游戏规则的改变者，提供了驱动运营效率、减少环境影响并实现数据驱动决策的变革性解决方案。

2024-06-11 08:03:11

大数据
从SQL Boy到管理者：数据分析师成长的五个阶段
经历了前四个阶段，实际上已经能在公司里混到数据部门领导了，只不过不同公司数据团队规模有差异，因此管辖权限会有区别。作为部门管理者，除了专业能力外，常规的管理方法也要有一定掌握。这个话题展开就大了，这里先不多说。

2024-06-11 00:11:00

SQL数据分析师数据
经营分析的三个等级，最厉害的长啥样？
经营活动太多，导致的交叉重叠问题。在中级分析部分，我们已经知道：活动之间可能有重叠，新旧产品可能有替代，新老渠道可能有冲突，研发升级不见得有效果……总之，每件事都会产生成本，但不是每件事都能挣钱。

2024-06-07 15:15:56

经营分析决策
关于 Python 数据分析的 15 个 NumPy 应用
本文专为那些希望深入了解并掌握NumPy核心功能的数据分析新手设计。我们将通过10个实用的应用示例，带你从基础操作到一些高级技巧，让你的数据分析之旅更加顺畅。

2024-06-06 09:08:14

NumPyPython数据分析
大数据实时分析：Flink中的Table API
虽然大多数基于 Flink SQL 的在线编辑和任务执行引擎都是通过 Table API 实现的，但还有其他方法可以实现类似的功能，包括直接使用 SQL API、Flink SQL CLI、REST API、Flink Dashboard 和 Flink SQL Gateway 等。

2024-06-06 08:58:08

大数据SQLAPI
大数据实时分析：Flink Dashboard 任务运维和监控
Flink Dashboard 可以与多种开源工具集成，如 Apache Zeppelin、Apache Superset、Airflow、Grafana 和 Prometheus 等。

2024-06-05 09:16:54

开源工具Airflow
大数据实时分析：FlinkSQL中的窗口选取
会话窗口是一种基于活动间隔的窗口。它们没有固定的大小或滑动间隔，而是根据一段不活动的时间（间隔）来划分窗口。当超过指定的不活动时间间隔时，窗口会结束并开始一个新的窗口。

2024-06-04 14:10:00

FlinkSQL窗口大数据
第三届粤港澳大湾区（广东）算力产业大会暨第二届中国算力网大会在韶关举行
今日，由广东省政务服务和数据管理局、韶关市人民政府、鹏城实验室联合主办的第三届粤港澳大湾区（广东）算力产业大会暨第二届中国算力网大会在市区举行。

2024-06-04 10:24:32

数据
借助Geemap分析空间地理数据 译文
这个Python库用于使用Google Earth Engine（谷歌地球引擎）和ipyleaflet创建交互式地图。

2024-06-04 08:00:00

GeemapPython
数据湖在快手的应用实践
本文将分享数据湖在快手的应用实践。文章从业务使用方的视角，全面回顾了数据湖(Hudi)在快手内部的应用推广历程，给业务开发带来的效率提升和成本优化，以及在实际应用中如何与技术团队紧密配合将 Hudi 打造为覆盖全公司、赋能多场景的核心基础设施。

2024-06-04 07:29:13

数据湖Hudi大数据
这才是真正的数据分析项目，而不是取数发通报
计划类工作在跳槽的时候也很好用。因为制定计划涉及整个公司经营分析指标体系，经营方向确认，通过计划类项目，能很好地建立全局认知，在面试官面前显得很有水平。

2024-06-03 14:23:00

数据分析项目计划类
大数据分析是什么、它是如何工作的
大数据分析描述了在大量原始数据中发现趋势、模式和相关性的过程，以帮助做出基于数据的决策。这些过程使用熟悉的统计分析技术，并在更新的工具的帮助下将它们应用于更广泛的数据集。

2024-06-03 14:03:35

大数据分析大数据
总做描述性统计，深入的数据分析到底怎么做？
很多同学做不深入，是因为从2级深度开始，就不能只指望几个指标/维度交叉一下，直接拉出结论来，就得结合业务场景，转化业务假设，然后搜集证据。这要求掌握业务场景、指标、逻辑能力。这些能力需要积累和锻炼才能提升。

2024-05-31 11:37:20

数据分析验证维度交叉
零售行业商品竞争力提升的数据探索
本文将分享零售行业商品开发的基本流程，以及盒马为提升商品竞争力在数据建设方面所做的探索与实践。

2024-05-31 09:00:07

数据建设数据管理数据智能化
第三届粤港澳大湾区（广东）算力产业大会5月30日开幕
5月28日，韶关市举行第三届粤港澳大湾区（广东）算力产业大会暨第二届中国算力网大会新闻发布会，介绍大会筹备情况和亮点环节。

2024-05-30 16:21:07

产业
Gartner发布2024年数据与分析重要趋势
在近日的Gartner数据与分析峰会上，Gartner分析师介绍了IT领导者必须把握并纳入其D&A战略的重要数据与分析趋势。

2024-05-29 13:29:37

数据 分析Gartner
数据分析基础 | Python数据交叉表，你学会了吗？
数据交叉表是数据分析中非常重要的工具，掌握它可以让你更加高效地进行数据处理和可视化呈现。

2024-05-29 12:47:00

Python数据数据分析
搭建数据指标体系，我总结了标准化全流程
业务流程是主要数据来源，指标体系首要任务是反馈业务流程情况。有了主指标以后，要结合业务流程，梳理出过程指标。有了过程指标，才能解释主指标为什么低，为什么高。

2024-05-29 12:41:33

数据指标流程
京东统一存储实践
随着大数据时代的到来，海量数据的存储与处理成为了众多企业面临的重要挑战。HDFS 作为一个高可靠性、高扩展性的分布式文件系统，在京东零售的数据管理中扮演着重要角色。本文将分享京东在 HDFS 统一存储方面的实践经验，并对相关的技术细节进行总结。

2024-05-29 07:56:41

大数据海量数据HDFS
七个领先数据仓库和数据库的深入比较
在当今的数字时代，数据仓库和数据湖已成为存储和分析大量数据的核心，为各种数据管理挑战提供可扩展的解决方案。探索数据仓库和数据库的多样化世界，比较AmazonRedshift和MySQL等主要参与者，以确定最适合您的数据管理需求的解决方案。

2024-05-29 07:10:00

数据仓库数据湖
火花思维：从 0 到 1 构建一站式数据开发治理平台
火花思维作为在线教育领域的佼佼者，深知数据对于决策和运营的重要性。为进一步释放数据资源的价值，公司从 0 到 1 构建了一站式数据开发治理平台，实现了数据集成、数据开发、数据分析、数据服务等全流程整合，为公司的长远发展奠定了坚实的数据基础。

2024-05-28 07:58:08

数据分析数据开发火花思维
肯睿Cloudera：数据如何改变生活
一旦企业能够充分利用其创建和采集的海量数据，便开启了无限的可能性。

2024-05-27 10:30:20

数据Cloudera
NoETL，开启自动化数据管理新时代
在这个主题中，有两个大家很熟悉的词：ETL 和数据管理。但同时，也有两个不太熟悉的词：NoETL 和自动化数据管理。我们是否在创造一种新的概念？今天我将回答这个问题，并通过回答这个问题来解释我们为什么要创立 Aloudata 这家公司，以及我们的定位是什么。

2024-05-27 07:42:42

ETL数据管理NoETL
敏捷的数据工程实践
本文介绍了什么是敏捷数据工程， 并分析了几个有效的实践。如果能灵活的在数据项目中应用，将有效提升我们的数据产品交付质量。

2024-05-24 10:23:25

敏捷数据工程数据开发
上一页 1 ··· 678910 ··· 185
点赞

51CTO技术栈公众号

业务
速览
在线客服