51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术24年11月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9005内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9005 条
Cloudera：十大安全实践为云数据湖仓安全保驾护航
数据湖仓的架构设计包含一个复杂的组件生态系统，其中每个组件都是一条可以使用数据的潜在路径。从规避风险的角度而言，有的企业可能不愿将生态系统迁移到云端，但经过多年的发展，云数据湖仓已经变得更加安全、合理，相比本地数据湖仓具有明显的优势。

2022-12-26 15:20:16

数据湖仓Cloudera
数据孤岛是业务效率的无声杀手
打破数据孤岛是改进组织数据管理和实现数据有效利用以实现业务目的的重要一步。组织可以使用多种策略来打破数据孤岛并促进跨部门和团队共享和使用数据。

2022-12-26 15:04:44

数据孤岛数据管理
图像处理工具Python扩展库，你了解吗？
opencv 是一个非常流行的数据可视化图形库，它底层使用 c++进行开发，拥有非常高效的执行效率。

2022-12-26 00:43:26

python扩展库可视化
求职数据分析，项目经验该怎么写
首先得正本清源：什么是项目？答：项目是在特定时间内，集合特定资源，为达成特定目标所做的工作。简而言之一句话：项目不是临时性工作，是特事特办。

2022-12-26 00:00:03

求职数据分析项目
在OKR中，我看到了数据驱动业务的未来
数字化时代，新商业模式、新技术应用，都需要大量技术手段运营，需要试点，不再是拉横幅、喊口号、打鸡血能解决问题的了。因此可以期待，在未来，OKR方法能更深入地使用，能真正带来数据驱动。​

2022-12-26 00:00:02

数据驱动业务
2023展望：新的一年将给大数据分析领域带来什么？
数据仓库一直很受欢迎，尤其是在云端。但SAS执行副总裁兼首席信息官Jay Upchurch表示，预计2023年将有更多客户从传统数据仓库转向实时数据存储和分析。

2022-12-25 15:33:36

数据分析数据仓库数据存储
阿里云ADB基于Hudi构建Lakehouse的实践
今天非常高兴能够借这个机会和大家分享下阿里云 ADB 基于 Apache Hudi 构建 Lakehouse 的应用与实践。

2022-12-23 16:52:22

Lakehouse数据湖
火山引擎云原生大数据在金融行业的实践
大数据架构向云原生演进是行业的重要趋势，火山引擎协助关键金融客户在大数据云原生方向进行了深度实践，形成了整体解决方案，本文将分享火山引擎云原生大数据在金融行业的实践。

2022-12-23 09:29:52

大数据
《数据成熟度指数》报告：64%的企业领袖认为大多数员工“不懂数据”
来自世界各地的数百位行业领袖接受了“关于数据在其组织中的作用”的调查和采访，64%的受访者表示员工对数据缺乏理解。

2022-12-22 14:32:41

大数据
肯睿中国（Cloudera）：2023年企业数字战略三大趋势预测
随着越来越多的行业在数字化方面趋于成熟并广泛采用这些技术，2023年将成为企业寻求跨业务职能部署新兴技术解决方案的关键一年。以下列举了在未来一年中可能主导业务重心的三大关键趋势。

2022-12-21 14:22:15

ClouderaCDP
大数据在医疗保健领域的使用案例
使用大数据分析技术促进健康，帮助医疗干预和管理至关重要。大数据分析可以增强患者体验、提高效率、降低费用并提高服务质量。

2022-12-21 09:48:12

大数据
夯实数据智能底座 共筑数字经济发展“新基石” 原创
12月15日，在第三届银行业数字化创新（中国）峰会上，中电金信“源启数据资产平台”正式发布。该平台是中国电子金融级数字底座“源启”的重要组成，基于DataOps和DataFabric理念，以数据资产积累和数据价值创造为目标，利用大数据技术、AI技术以及数据安全技术，打造集数据管控平台、数据中台和AI平台为一体的数据智能底座。

2022-12-19 10:35:57

中电金信数据智能
2022 Gartner全球云数据库管理系统魔力象限发布 腾讯云数据库入选
12月16日，在刚刚发布的 Gartner® 2022年度《云数据库管理系统魔力象限》研究报告中，腾讯云数据库进入特定领域者（Niche Players）象限。

2022-12-16 17:56:34

Gartner腾讯云数据库
场景化、重实操，分享一个实时数仓实践案例
本文将从一个实际业务场景和一个模拟数仓构建的案例来说明如何利用 EasyData 实时开发平台来建设实时数仓。

2022-12-15 17:50:14

场景化重实操实时数仓
Denodo预测2023年数据管理和分析的未来
我们可以看到，在与数据管理基础设施和架构相关的领域内出现了很多创新。以下是Denodo认为将在 2023 年产生最大影响的五大趋势，这些趋势与数据和分析有关。

2022-12-14 15:53:22

数据管理数据分析
利用数据推动可持续发展
通过优先考虑数据驱动的可持续发展计划，企业可以领先于新的和不断变化的监管标准。

2022-12-14 15:37:23

大数据
七步走！做出高质量的数据分析项目
数据分析项目特别需要仪式感！因为数据分析成果很少能成为白花花的银子，等年底做总结的时候可能大家都忘得差不多了。因此一定要做足仪式。比如项目启动时和合作方一起开个会，开到中午大家一起大圆桌搓一顿。项目结束汇报时专门约上大老板，汇报完合影留念。

2022-12-14 14:13:01

数据分析项目
Arctic的湖仓一体践行之路
简单说，我们可以把数据湖当做一个存储各类结构化、半结构化和非结构化数据的池子，这个池子可以是私有化的 hadoop 集群，也可以是云端的对象存储，因为我们要存储体量非常大的原始数据和明细数据，这个池子的成本必须足够低，开启 EC 的 HDFS 或对象存储无疑是最佳选择。这个大需要多大？

2022-12-13 17:42:47

Arctic存储湖仓
数据让我们的建筑越来越智能
推动这种增长的关键因素是什么？在很大程度上，这是对降低运营成本、提高生产力、提高能源效率和提高安全性的需求。此外，5G 技术的出现和智慧城市项目的兴起有望在未来几年为智能建筑行业创造有利可图的机会。

2022-12-13 11:13:34

数据传感器
大数据十问：落地、效率与开发，如何齐头并进？
近日，英特尔大数据技术全球 CTO 戴金权老师围绕「大数据」的十个问题给出了自己的观点。

2022-12-12 15:36:48

大数据
分布式计算MapReduce究竟是怎么一回事？
MapReduce是Hadoop提供的一个分布式计算框架，对于大数据开发人员来说，只要关注于自己的业务，实现他们提供的Map和Reduce接口，接下来底层都交给Hadoop来处理。

2022-12-11 09:27:01

MapReduceHadoop框架
淘系数据模型治理优秀实践
本次分享题目为淘系数据模型治理，主要介绍过去一年淘系数据治理工作的一些总结。

2022-12-09 09:39:01

数据治理
谈谈如何构建优化的流数据架构
流处理最初是一种“特定群体”技术。但随着 SaaS、物联网和机器学习的快速发展，各行各业的组织现在都在试行或全面实施流分析。很难找到一家没有应用程序、在线广告、电子商务网站或物联网产品的现代公司。这些数字资产中的每一个都会创建实时事件数据流。人们越来越渴望整合流式数据基础架构，从而使复杂、强大和实时的分析成为可能。

2022-12-08 16:02:39

数据架构工具
大数据分析对医疗保健的影响
随着人口的增长，普通人的寿命也在增加。这凸显了医疗保健专业人员需要快速应对影响患者健康的挑战。医疗保健分析能够最大限度地降低治疗和可预防疾病的成本，并提高整体生活质量。通过使用大数据，医疗从业人员能够收集大量数据，并从得出的见解中得出最佳策略。

2022-12-08 10:15:38

大数据医疗保健
当我们说大数据Hadoop，究竟在说什么？
本文讲解了大数据开发中最流行的软件Hadoop, 它主要分为3部分，管理文件存储的hdfs, 统一管理资源和任务的调度平台Yarn，以及提供了一种计算引擎MapReduce, 基于这三个"磐石"，可以构建出整个大数据生态。

2022-12-08 08:40:25

大数据Hadoop存储
Cloudera：巧用数字化转型工具，助力企业降本增效
Cloudera提供了各种帮助企业加速数据和AI计划的工具。其中就包括通用数据分配（UDD）和应用机器学习原型（AMP）这两个特定领域。

2022-12-07 13:58:56

Cloudera
2022年及以后大数据的五个发展趋势
随着技术的发展，收集的数据量呈指数级增长，而且在短时间内没有放缓的迹象。企业正在致力于利用大数据分析来保持竞争力。以下概述了2022年及以后大数据的5个发展趋势。

2022-12-07 13:37:34

大数据数据分析
ClickHouse在自助行为分析场景的实践应用
在巨大的数据量面前，想追求极致的性能及全部场景适应性，必须在某些技术方案上进行取舍。ClickHouse从底层列式存储到上层向量化并行计算，都没有考虑存算分离、弹性扩展的技术方案，甚至于横向扩容数据需要手动re-balance。因此，如果要实现云上的可动态伸缩、存算分离，ClickHouse需要重构底层代码。

2022-12-07 08:31:45

ClickHouse并行计算数据
网易严选离线数仓治理实践
前面关于各个治理项目都有提到需要推送待办任务给数据开发处理，所以我们需要一个通用的消息通知机制。再结合到我们大多数巡检场景都可以基于元数据+SQL的形式识别，于是我们采用UDF的方法，对接消息中心的接口，实现了消息通知的SQL化。

2022-12-06 17:52:57

离线数仓治理
2023 年数据治理趋势
尽管整个组织的数字孪生还没有普及到整个数据领域，但是数据治理的许多基本方面——当通过实时访问控制和情景适应性的镜头应用时——可以模拟它们详细描述当前发生的事情的能力。

2022-12-06 10:04:33

数据治理趋势
一份“靠谱”的年度经营计划，你学会了吗？
做经营分析的同学们则被夹在中间，一边被要求“科学合理地进行测算”，另一边又得对领导们拍脑袋/扯皮出的结论“给予合理解释，科学地分配到每个月”，那是要多郁闷，有多郁闷。到底合理的年度经营计划该咋定，经营分析又该怎么发挥作用？今天给大家捋一捋。

2022-12-05 11:38:11

分析师数据作用
漫谈对大数据的思考
“大数据”已跃升为我们行业中最受炒作的术语之一，但炒作不应使人们忽视这样一个事实，即这是数据在世界上的作用真正重要的转变。

2022-12-05 11:29:14

大数据数据管理
测试一下，读懂数据的能力，你有吗？
因为这就是孤零零一个数字，啥含义都没有。想读懂数据，至少它得是一个明确的数据指标。包含了指标名称，使用场景，计算口径。同样是180，我们换成：成年女性，身高180cm。是不是一下清晰很多了。

2022-12-03 18:24:13

数据能力场景
用艺术的眼光探索数据之美
在深入分析的情况下，我们应该用数据图形表示技术的思想。我们经常使用bar charts, histograms, pie charts, boxplots, heatmaps, scatter plots, line plots等等这些典型的图，这些图对于数据可视化是必不可少的。

2022-12-02 15:11:52

数据分析数据可视化
聊聊数据分析成果如何落地
数据分析成果落地难，本质上是难在“做项目”上。因为数据分析涉及数学、统计学、计算科学等等理论，很多同学会本能地倾向于“做学问”，忘了我们是在企业，企业是为了赚钱而努力。

2022-12-02 11:40:00

数据分析成果
数据分析项目的五个坑点，千万不要对号入座！
所谓：猛将必发于卒伍，宰相必起于州郡。好的数据分析师，不是一上来就搬弄模型，而是能从数据细节里，读出企业的问题；能基于哪怕最简单的数据基础，设计出可行方法帮助业务从低端向高端升级。这才是好的数据分析师真正起到的作用。

2022-12-01 11:44:32

数据分析项目B2B
浅谈数据血缘的实现原理
市面上其实针对数据血缘的产品有很多，像阿里DataWorks的数据地图、字节的DataLeap以及非常火的开源产品Apache Atlas都是非常好用工具产品。但是本质上是想通过这篇文章，让小伙伴们在使用这些产品的时候多去思考这些产品背后的实现原理。

2022-11-30 18:38:50

数据血缘DataLeap
年终盘点：2022年炙手可热的十家大数据初创公司
下面就来看看这10家在2022年引起我们关注的具有突破性技术的大数据技术初创公司，其中包括了很多在数据库管理、数据转换、数据质量、数据集成和数据分析领域提供领先软件和服务的公司。

2022-11-30 11:06:56

大数据技术初创公司大数据
谈谈数据湖和数据仓库
数据湖是近十年来出现的一个术语，用于描述大数据世界中数据分析管道的重要组成部分 。

2022-11-29 17:16:57

数据湖数据仓库大数据
大数据的发展已经走到尽头了吗?
数据网格可以通过在更广泛的利益相关方之间驱动更高级别的自治和数据工程联盟，克服大数据中固有的许多挑战。然而，大数据并不是一种灵丹妙药，它为企业带来了一系列需要管理的风险。

2022-11-29 15:05:16

大数据数据网格
这才是真正的商品分析，而不是罗列进销存
很多商品报表只有库存和销售额两个指标，这是因为商品主管对采购周期、保质期自己心里有数，并且这俩数据一般也不在交易表里，导致数据分析师取数的时候没有包含这俩数据。

2022-11-29 11:31:19

商品分析商品销售库存
十个实用的数据可视化的图表总结
可视化是一种方便的观察数据的方式，可以一目了然地了解数据块。我们经常使用柱状图、直方图、饼图、箱图、热图、散点图、线状图等。这些

2022-11-28 15:04:42

数据可视化工具
只需五步，实现数据分析闭环
如果每次数据分析做出的预判都很准的话，就是所谓：知其所以胜，知其所以败，这就是数据分析的最高境界了。说明分析师本人已经抓住了一个业务的核心规律。

2022-11-28 11:43:24

数据分析不及格数据验证
用这个算法能让大数据集群性能提升100倍
我们完全可以就从TreeSet中获取续约时间最老的那个契约，假如说连最近一次续约时间最老的那个契约都还没过期，那么就不用继续检查了啊！这说明续约时间更近的那些契约绝对不会过期！

2022-11-27 17:39:06

大数据集群性能
从SQL Boy到管理者：数据分析师成长的五个阶段
SQL Boy是数据分析师们必经阶段，所谓“猛将发于行伍，宰相起于州县”，正是此理。因为真正工作中取数，并不是对着一个清洗好的大宽表写sql那么简单。

2022-11-26 00:00:05

SQL数据分析师业务
科技与世界杯：大数据如何改变足球赛
在此次卡塔尔世界杯足球赛期间，球员们将有一种更科学的方式来争取上场时间。在终场哨响后的几分钟内，赛事组织者将向每位球员发送一份详细的表现明细。例如，中锋的传球、带球和射门表现;以及当对方控球时，防守队员对对方的抢断频率和程度数据等。

2022-11-25 10:24:47

大数据科技与世界杯
生产环境的数据表变更很麻烦？那这个功能你应该用的上
在数据开发中，我们经常会碰到要对一些生产环境的表进行一些变更，包括增加字段等操作，但是生产环境的表又不能随意变更，因为往往这些表格存在复杂的上下游关系，所以一般都会需要经过测试，通过测试验证的代码才能提交到线上。

2022-11-24 18:38:29

数据开发数据存储
企业数据战略的七个发展趋势
以下是七个数据战略主要趋势的简要概述，这些趋势可能会在未来几个月重塑企业的数据战略。

2022-11-24 14:03:10

数据战略大数据
火山引擎工具技术分享：用 AI 完成数据挖掘，零门槛完成 SQL 撰写
专业算法团队在做数据挖掘时，数据分析及可视化也会呈现相对割裂的现象。流程化完成算法建模和数据分析工作，也是一个提效的好办法。

2022-11-24 09:19:53

AI数据挖掘
vivo大数据日志采集Agent设计实践
本文通过在vivo的日志采集服务的设计实践经验，为大家提供日志采集Agent在设计开发过程中的关键设计思路。

2022-11-23 21:51:42

大数据
上一页 1 ··· 1920212223 ··· 181
点赞

51CTO技术栈公众号

业务
速览
在线客服