51CTO首页
AI.x社区
博客
学堂
精品班
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

大数据

8917内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8917 条
大厂必考：数据分析如何实现闭环
业务没有需求，数据分析师通过看数据，主动发现了一个异常点，又找到了解决问题的办法，然后告诉业务方，业务方听了大喜，立即执行，发现效果非常好。

2024-07-26 08:30:03

数据分析数据业务
StarRocks 是什么？ 一文了解
在数据分析这个复杂多变的领域，不太可能存在一个放之四海而皆准的解决方案。StarRocks 在某些方面的确表现出色，例如尤其是在处理大规模数据集时的查询速度。

2024-07-26 00:00:10

StarRocks数据分析技术
新一代实时数仓：阿里云数据库 SelectDB 版--100% 兼容 Apache Doris 的全托管云原生实时数仓
本文将介绍 SelectDB 产品能力及其所支持的场景，为数仓选型提供参考和借鉴。SelectDB 是基于 Apache Doris 提供的一个商业化的云原生产品。Apache Doris 是一款国产的开源数据库，专注于实时数仓领域。

2024-07-25 08:12:11

数仓选型开源数据库SelectDB
AB实验的采样分流技术演进以及Sutva假设与现实挑战
通过 AB实验，我们可以发现退烧是因，出汗是果， 所以发烧捂汗的做法是不对的。在互联网产品中，类似的问题很常见， AB实验可以给决策者更清晰的因果链路, 从而让产品经理或者业务决策者更全局的视角，更准的决策。

2024-07-23 10:02:49

AB实验大数据数据分析
分布式 Data Warebase - 让数据涌现智能
本文将从数据、信息、知识和智慧（DIKW）的层次结构出发，探讨数据系统的发展历程，以及如何让数据涌现智能。

2024-07-19 11:08:41

数据系统数据模型DIKW
火山引擎基于 DataLeap 的电商指标管理实践
本文将分享火山引擎基于 DataLeap 的电商指标管理实践。指标管理的关键在于三个要素：指标的有效拆解、统一基础数据的建设，以及指标管理角色的明确划分。

2024-07-18 08:40:28

指标管理数仓建设大数据
聚焦电商场景，详解抖音集团埋点及归因分析方案
本文将聚焦电商场景，介绍抖音集团埋点历程、电商场景解决方案、归因实践及其收益等模块，旨在为数据技术人员在埋点后数据加工过程中所遇到的问题提供有益思路。

2024-07-18 08:33:19

数据分析SDK埋点
为什么你做的数据复盘报告，总被人Diss
虽然说只看主指标是不够的，但是不看主指标肯定不行。不但要看，而且要第一位看，先明确本次复盘讨论的具体业务是啥，考核的主指标是啥。

2024-07-16 11:51:54

数据复盘报告
一文带您了解伪对数(Pseudo-Log)：可视化倾斜数据的黄金方法
经典对数变换不能处理零和负数，而伪对数变换可以应对这一问题。伪对数在所有实数上都有定义，并能平滑过渡。本文通过比较伪对数和经典对数变换，展示了伪对数在处理和可视化偏斜数据中的优越性。通过实例数据，显示伪对数变换能够有效地改善数据分布和可视化效果，使得数据展示更加清晰。

2024-07-16 10:43:45

伪对数可视化数据
金融场景中的指标体系建设与应用
本文将分享金融场景中的指标体系建设思路，希望能够为大家带来新的启发。金融行业的建设长期以来依赖于成熟技术，并投入了大量数据科技人才，通过自下而上或烟囱式的方式构建其基础架构。

2024-07-16 08:38:17

数据仓库指标体系大数据
StarRocks 数据湖查询和迁移实践
本次将从实战的角度分享 StarRocks 数据湖查询和迁移的能力与解决方案。早期都是离线数仓，为了应对现在数据分析中越来越多的实时性场景，以及对 ACID、事物性隔离越来越高的要求，数据湖技术应运而生。

2024-07-12 11:40:13

数据湖StarRocks离线数仓
完整的数据指标体系，大厂是怎么搭建的？
很多新手会习惯性忽略建立标准环节。于是导致了大量铺陈数据，然后不知道下啥结论的晕头鸭子问题。如何在无刚性目标情况下，建立评价标准，读懂数据含义，是搭建体系的关键。

2024-07-11 11:52:24

数据指标体系
数组探秘：数据结构的基础，深入解读数组的内部机制！
数组当中的元素在内存中是连续存储的，且每个元素占用相同的内存、数组是有序的、数组的长度一旦确定是不可变的、当然数组也可以通过System.arraycopy方法进行数组的替换，简单理解就是扩容。

2024-07-11 11:35:08

数组结构内部机制
.NET也能玩大数据？你学会了吗？
.NET不仅在传统软件开发领域占据一席之地，在大数据处理方面同样表现出色。其丰富的库和框架、高效的性能、强大的安全性以及易用的开发工具，使得.NET成为大数据处理中不可忽视的力量。随着技术的不断进步和应用场景的不断拓展，.NET在大数据领域的前景值得期待。

2024-07-11 08:29:57

大数据.NET工具
阿里云 ClickHouse 企业版： 新一代云原生 Serverless 实时数仓
ClickHouse 企业版通过存算分离、秒级扩容、Serverless 弹性等技术手段，降低了资源成本，提高了查询性能和效率。同时，该产品支持跨 AZ 高可用和低成本存储，保证了数据的可靠性和经济性。

2024-07-11 08:13:32

ClickHouse云原生数据分析
京东零售的指标中台建设
指标中台技术不仅仅是一个技术实现，更是一种组织和管理数据的战略思维。指标中台技术是企业在数字化转型过程中的一种重要策略，它通过构建共享平台来整合企业的核心能力，从而提升业务效率和市场响应速度。

2024-07-11 08:09:21

指标中台管理数据数据虚拟化
不再堆砌数据，这有一份超棒的经营分析模板
一提到“经营分析报告要增加业务指标”，很多人就会搬出：业绩=客户数*转化率*客单价这一套东西。注意！站在业务角度，客户数、转化率、客单价这些指标，照样是结果指标。如果只拿这些指标进来，依然会得出“业绩降是因为客户少了，所以要搞高”这种无脑结论。

2024-07-10 12:11:30

数据经营分析业务
在电商场景中，如何建设全链路数据血缘？
本文将分享在电商场景中如何建设数据血缘。在数据一致性方面，通过全链路血缘等手段，我们实现了指标从定义到生产消费的完整自动化流程，提升了指标的管理效率，减少了人为失误。

2024-07-09 10:53:35

数据血缘数据一致性数仓体系
做到了！我用数据分析提升用户转化率
常见的质疑就是这么来的。这些结论之所以都是废话，是因为业务看了以后，真的不知道能干啥。业务方期望听到的优化建议，是：直播还能不能做！能做的话，做多少场？做啥话题？挂啥链接？不能做的话，我要怎么解决销售问题！这才是有用建议。

2024-07-08 11:33:45

业务场景优化
为什么现在是重新思考传统数据治理框架的时候了
在当今的数字时代，随着连接设备数量的增加和AI的崛起，各企业有充足的数据可供深入分析，然而，许多企业在有效利用这些数据资产和信息时遇到了困难，这成为了创建能够提供企业所需业务价值的数据驱动文化的主要障碍。

2024-07-05 15:42:54

数据治理大数据
”人货场”模型搞懂没？数据分析大部分场景都能用！
人货场三个维度之所以经常用，是因为这三者与用户行为有直接关系，并且商品属性、卖场属性、用户习惯都有一些天生的规律可循。因此很适合作为分析的基础，做深做细。一方面能对业务有更清晰的认知；另一方面，想建立更复杂的模型也有线索了。

2024-07-05 11:50:15

模型数据分析场景
11个开源免费的数据分析与可视化工具
本文推荐一些优秀的开源数据分析与可视化工具，可以在从数据清洗到可视化等过程提高工作效率。

2024-07-05 11:08:21

开源数据分析可视化工具
使用 Spring Boot 3.x + Flink 处理数据流中的延迟与乱序问题
在实时数据处理系统中，延迟和乱序是两个常见且棘手的问题。延迟是指数据在传输和处理过程中出现的时间滞后，而乱序则是指数据到达的顺序与其生成的顺序不一致。这些问题会直接影响数据处理的准确性和时效性。

2024-07-05 10:17:08

数据流系统CPU
模版+案例 | 数据指标体系的构建方法和流程
很多同学构建数据指标体系，喜欢堆砌数据。放一堆指标以显得丰富。可实际上如果不按业务流程找子指标，指标之间逻辑性就很差，看起来经常莫名其妙。更不要说，很容易弄出来类似“你幸福吗”这种稀奇古怪的玩意。

2024-07-04 12:10:50

数据指标体系
腾讯云发布自研大数据高性能计算引擎Meson，性能最高提升6倍
腾讯云发布全新自研大数据高性能计算引擎Meson。通过软硬一体加速和智能技术的综合应用，该引擎能显著为AI等场景下的大数据任务提供更优的计算性能，并节省更多计算资源。

2024-07-04 10:23:51

腾讯云大数据Meson
Bio-OS促进科研发展，助力生命科学领域创新发展 原创
为了进一步推动国内生命科学领域的交流与合作，构建一个“开放、创新、合作、共赢”的科研新生态，CCF开源创新大赛暨第二届Bio-OS开源开放大赛于近日盛大启动。

2024-07-04 09:00:00

Bio-OS生命科学生物信息
从拍脑袋到数据支持决策，这个分析师是怎么做到的？
数据驱动决策需要的是业务流程与数据紧密配合，领导层参与推动，才能实现的事。数据驱动决策，从来都不是一个神机妙算的世外高人，拿着数据口念咒语：“妈咪妈咪轰”就轰出来一个惊天地泣鬼神的结论，这是基本常识。

2024-07-03 12:01:36

数据驱动决策
2024年的治理革命：大数据和人工智能
2024年，在大数据和生成式人工智能(GenAI)融合的推动下，治理格局将发生深刻变革。这种革命性的结合正在重塑政府收集、分析和利用数据的方式，以做出明智的决策，应对复杂的社会挑战。

2024-07-01 12:45:57

大数据人工智能
腾讯云智能融合 AI+数据，重塑数据管理新范式 原创
在 WOT 全球技术创新大会《AI 与数据的智能融合》专场中，来自腾讯云的三位专家分享了腾讯云在数据管理与人工智能领域的技术成果和成功案例，并探讨二者如何智能融合为企业提供更高效、更智能的数据服务。

2024-07-01 11:03:05

WOT大会腾讯云
数据分析中十种常见的可视化图例 原创 精选
漏斗图（funnel chart）类似于漏斗的形状，其中每个部分逐渐变窄。分段垂直排列，以显示层次结构。在漏斗图中，每个分段对应于顺序过程中的一个步骤或阶段。它们说明了数据点在各个阶段中的进展。

2024-07-01 08:51:19

可视化数据分析漏斗
数据分析报告，如何写出“可执行”的建议？
唯独数据分析能力是可以通过学习、训练、实验、记录来不断提升的。所以基于数据提可行性建议，可能不会被采纳，但只会越来越被重视。​

2024-06-26 01:09:36

数据分析训练
赋能企业AI：肯睿Cloudera发布三款全新AI助手，让数据洞察更迅速、更可信
肯睿Cloudera推出AI驱动的 SQL、BI 和ML助手，致力于持续深化AI功能

2024-06-25 17:39:41

AI人工智能大数据
大数据框架及流批一体怎么选？
在日常生活中，我们通常会先把数据存储在一张表中，然后再进行加工、分析，这里就涉及到一个时效性的问题。

2024-06-25 13:08:31

大数据数据存储
谈谈利用主数据改进数据分析的重要性
在接触数据科学时，许多人专注于数据分析、数据可视化和数据收集，而忘记了整个数据科学的一个基本组成部分：主数据。

2024-06-24 21:18:48

数据分析
Kafka 中的大消息处理策略与 C# 实现
本文将深入探讨大消息对Kafka的影响，提出一些解决策略，并通过C#示例代码展示如何在实际应用中处理大消息。

2024-06-24 12:47:54

KafkaC#大消息处理
AI如何影响数据治理
收集、清洗、企业和保护这些数据以供AI和机器学习使用已成为一项独立的项目——在这个治理工作中，AI工具本身也扮演着重要角色。结果是，数据治理得到极大改善，惠及整个企业。

2024-06-21 11:11:22

AI大数据
揭秘打车软件，如何找到方圆 1km 以内的乘客
用geohash那结果显然是AB更近，但是实际上A与B的距离比AE、AC、AD都远。这其实是一个边缘性的问题........后续我会更新如何去避免这种问题的出现。

2024-06-21 08:44:37

打车软件边缘性
2031年大数据分析市场将达到近8460亿美元
SkyQuest预计，到2031年大数据分析市场的价值将达到8459.7亿美元，预测期内(2024-2031年)的复合年增长率为13.40%。

2024-06-18 10:48:58

大数据大数据分析
用DataOps释放数据项目的潜力 译文
各行各业的公司越来越关注收集数据，并寻找创新的方法以获得宝贵的见解。企业组织愿意投入大量的时间和资金来实现这一目标。

2024-06-18 08:00:00

DataOps数据项目
别当布谷鸟！这些方法能拯救你枯燥的数据日报
为什么每日指标会波动，这个很纠结的问题，提前准备了答案。通过打标签、梳理事件、定KPI，充分暴露波动背后的问题，引发深入思考。

2024-06-17 11:29:49

信息KPI标签
数据分析思路，总结了四个好用的模板
如果整体进度没很大问题，各子部门进展顺利，那么大家不会发表太多意见，看完后会说“很好，继续监控”。如果整体进度有问题，那么大家的思路会被引导到：“为什么A部门执行好，B部门不行？”上边去，这样就能做进一步的分析。

2024-06-13 11:54:03

数据分析模板进度
数据湖核心能力解析
本文将分享数据湖的发展近况。数据湖已成为企业数据平台架构的重要组成部分，传统的数据平台架构一般由数据湖、流式计算和 OLAP 引擎查询三个部分组成。这三个平台在以往通常是独立建设的，集群也是独立部署。

2024-06-13 08:10:18

数据湖流式计算OLAP 引擎查询
数据仓库中的七种建模方法及示例
试象一下，你是一家繁忙餐厅的分析工程师。每天，顾客都会预订、下订单并完成付款。所有这些数据都会流入餐厅的交易数据库，记录每次互动的详细信息。

2024-06-12 13:46:41

数据仓库大数据
WeOLAP：微信 OLAP 湖仓新场景优化实践
ClickHouse 在微信团队有着广泛应用，如实时报表、AB 实验和实时计算等，通过将 Hadoop 相关生态集成到 ClickHouse 中，性能得到了十倍到百倍的提升，能够做到万亿级数仓、亚秒级响应和稳定高可用。

2024-06-12 07:30:08

ClickHouseOLAP数据孤岛
太卷了吧，这份销售分析报告真是到位
如果发现问题，最好直接告诉一线：你这么做有用！还是上边的例子，如果真发现这个问题，可以先看签约率高的人做了什么。如果我们发现展示同行客户案例有效（提升5%左右），那直接把行业案例库作为功能做到产品里去。告诉他们：聊天的时候，点这个按钮，管用！

2024-06-11 13:57:41

销售分析数据互联网
大数据分析与GenAI：能源分配领域的变革力量
大数据分析与GenAI的结合无疑是一个游戏规则的改变者，提供了驱动运营效率、减少环境影响并实现数据驱动决策的变革性解决方案。

2024-06-11 08:03:11

大数据
从SQL Boy到管理者：数据分析师成长的五个阶段
经历了前四个阶段，实际上已经能在公司里混到数据部门领导了，只不过不同公司数据团队规模有差异，因此管辖权限会有区别。作为部门管理者，除了专业能力外，常规的管理方法也要有一定掌握。这个话题展开就大了，这里先不多说。

2024-06-11 00:11:00

SQL数据分析师数据
经营分析的三个等级，最厉害的长啥样？
经营活动太多，导致的交叉重叠问题。在中级分析部分，我们已经知道：活动之间可能有重叠，新旧产品可能有替代，新老渠道可能有冲突，研发升级不见得有效果……总之，每件事都会产生成本，但不是每件事都能挣钱。

2024-06-07 15:15:56

经营分析决策
关于 Python 数据分析的 15 个 NumPy 应用
本文专为那些希望深入了解并掌握NumPy核心功能的数据分析新手设计。我们将通过10个实用的应用示例，带你从基础操作到一些高级技巧，让你的数据分析之旅更加顺畅。

2024-06-06 09:08:14

NumPyPython数据分析
大数据实时分析：Flink中的Table API
虽然大多数基于 Flink SQL 的在线编辑和任务执行引擎都是通过 Table API 实现的，但还有其他方法可以实现类似的功能，包括直接使用 SQL API、Flink SQL CLI、REST API、Flink Dashboard 和 Flink SQL Gateway 等。

2024-06-06 08:58:08

大数据SQLAPI
1 23456 ··· 179
点赞

51CTO技术栈公众号

业务
速览
在线客服