鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据仓库

297内容

关注

涵盖数据仓库相关研究热点、技术难点与应用场景，帮助用户更好的学习数据仓库技术，最终支撑企业分析决策。

共 297 条

关于数据仓库以及云数据仓库的那些事儿！

几乎所有投资者都看好数据库上云趋势，就在云数据库、云原生数据库呼声高涨的同时，云数仓成为一个新的赛道，开始走入大众眼帘。

2021-09-01 10:03:44

数据仓库云数据仓库数据库

外部工具连接 SaaS 模式云数据仓库 MaxCompute 实战

MaxCompute 产品能支持的外部工具，大概可以分为商业智能、开发管理、传输调度、编程接口。本次分享主要关注商业智能（BI）工具这一板块，可以看到 MaxCompute 官方集成有Tableau、FineReport、FineBI、Quick BI。

2021-07-29 11:30:41

SaaS 云数据仓库 MaxCompute

数据规模爆炸性增长，云原生数据仓库数据化运营实战分享

在日前的2021阿里云金融数据智能峰会——《云原生驱动数智化运营的“增长黑马”》专场上，阿里云数据库资深技术专家魏闯先从数据价值链路角度切入，为大家解读云原生数据仓库如何支撑数据化运营、全链路营销和阿里集团双11业务，并展示金融客户最佳实践案例和应用场景。本文内容根据演讲录音及PPT整理而成。

2021-07-22 10:04:13

云原生数据仓库数据化运营

对比四大典型的云数据仓库：Snowflake、Redshift、BigQuery和Azure 译文

本文从特征参数、技术规格、以及定价模型等方面，为您综合比较了Snowflake、Redshift、BigQuery、以及Azure，这四种典型的云数据仓库的优缺点，并给出了选型时的各项参考因素。

2021-07-19 09:00:00

数据库数据分析技术

数据仓库有坑怎么办，如何从0到1来填坑

这种数据仓库体系，最典型的特征，是找数据只能给表，无法通过规范自主查找;看逻辑只能问人，无法通过模型设计快速了解;问业务只能靠求，别人管不过来自己的事情了，哪有时间来管你?

2021-07-05 22:32:33

数据仓库团队

数仓 | 该如何理解数据仓库的建设

在大数据时代，随着机器学习和人工智能的兴起，这个定义需要做一些补充：数据仓库不只是用于构建支持管理决策的商业智能BI的基础, 也是大量的机器学习和人工智能算法的底层基础之一。

2021-06-11 07:26:16

数据仓库机器学习

如何基于MaxCompute快速打通数据仓库和数据湖的湖仓一体实践

纵观整个计算机科学技术领域，对于数据处理的技术主要分为四个阶段，数据库阶段、大数据技术探索阶段、大数据技术发展阶段、大数据普惠阶段。

2021-06-07 10:45:16

大数据数据仓库数据湖

云数据仓库的未来趋势：计算存储分离

随着云时代的到来，数据库也开始拥抱云数据库时代，各类数据库系统（OLTP、OLAP、NoSQL等）在各内外云平台（AWS、Azure、阿里云）百花齐放，有些数据库还处于Cloud Hosting阶段，仅仅是将原有架构迁移到云主机上，利用了云的资源。有些数据库则已经进入了Cloud Native阶段，基于云平台IAAS层的基础设施，构建弹性、serverless、数据共享等能力。

2021-06-03 14:34:15

云数据仓库计算存储分离

女朋友问小灰：什么是数据仓库？什么是数据湖？什么是智能湖仓？

作为程序员，我们写的大多数商业项目，往往都需要用到大量的数据。计算机的内存，可以实现数据的快速存储和访问。

2021-05-28 09:23:07

数据仓库数据湖

云数据仓库的未来趋势：计算存储分离

随着云时代的到来，数据库也开始拥抱云数据库时代，各类数据库系统（OLTP、OLAP、NoSQL等）在各内外云平台（AWS、Azure、阿里云）百花齐放

2021-05-27 09:22:41

云计算数据科技

支持机器学习的8个数据仓库译文

对于规模非常大的数据集来说，理想的情况是在数据已经存在的地方建立模型，这样就不需要导出大量的数据。有一些数据仓库在一定程度上支持这一点。而随之而来的问题是：哪些数据仓库支持机器学习？它们是如何做到的？以下按字母排序对这些数据仓库进行分析和阐述。

2021-05-14 09:00:00

机器学习数据集工具

数据仓库和Olap傻傻分不清

数仓一般是多维模型模型，数据分层，ETL处理。它的数据源来源很多，格式也很多，比如结构化的数据，非结构化的数据。

2021-05-09 21:57:08

数据仓库 Olap

数据仓库环境现代化工具和技巧

数据仓库历史悠久，这里的基本想法是，大多数企业建立各种应用程序来自动化其基本业务流程，而这些业务流程各自发展，从而产生多个版本的数据。

2021-04-18 18:43:25

数据仓库数据数据库

简述数据仓库，数据集市，数据湖泊、和运营数据存储

互联网和大规模技术开发使得当今世界中数据的爆炸性增长。企业决策者希望研究数据之间的关系，点击数据的隐藏功能并分析和探索更深层次的数据。

2021-04-16 10:21:50

数据库数据湖数据

数据仓库和Hive环境搭建

数据仓库，英文名称为Data Warehouse，可简写为DW或DWH。数据仓库顾名思义，是一个很大的数据存储集合，出于企业的分析性报告和决策支持目的而创建，对多样的业务数据进行筛选与整合。

2021-04-15 07:40:44

数据仓库 Hive 环境搭建

关于数据仓库架构及组件方案选型

本文更想聊聊企业数据仓库项目上的架构和组件工具问题。

2021-03-31 10:16:00

架构运维技术

Teradata天睿公司被独立研究机构Forrester评为云数据仓库领导者

该报告由Forrester副总裁兼首席分析师Noel Yuhanna于2021年3月24日撰写完成，基于26项标准对云数据仓库市场的13家厂商进行评估和打分。

2021-03-25 17:27:12

万字详解整个数据仓库建设体系

英文名称为Data Warehouse，可简写为DW或DWH。数据仓库的目的是构建面向分析的集成化数据环境，为企业提供决策支持(Decision Support)。它出于分析性报告和决策支持目的而创建。

2021-03-18 10:04:46

数据仓库体系

关于构建数据仓库的几个问题

数据仓库(Data Warehouse)是一个面向主题的(Subject Oriented)、集成的(Integrated)、相对稳定的(Non-Volatile)、反映历史变化(Time Variant)的数据集合，用于支持管理决策(Decision Making Support)。

2021-03-03 21:24:57

数据仓库工具

云计算成为数据仓库的新重心

绝大多数组织计划在2021年扩大对云计算数据仓库和数据湖的投资。然而，围绕数据管理和ETL的许多问题仍然存在。

2021-01-21 11:44:20

云计算数据仓库云数据仓库

数据仓库工具方法-维度表同步 MySQL表结构同步到Hive

mysql 中的数据类型与Hive 是有区别的，但是他们有规律，有规律就好办了，我们可以通过写程序来批量处理，来提高我们的工作效率。

2021-01-06 10:36:55

MySQL 数据库 Hive

数据仓库分层架构深度讲解

本篇文章主要讲解数仓项目中为什么分层，比如我们在完成一个需要的需求的时候也许只需要一个复杂的SQL语句就可以完成。

2021-01-04 05:51:02

数据仓库架构

新数据仓库模式设计有利于企业用户

业务分析师的目标之一是用数据讲述完整的故事，提供有关业务如何进行或如何改进的见解。这是通过商业智能仪表板来实现，该仪表板从数据仓库提取数据。

2021-01-03 20:01:19

数据仓库数据库数据

数据湖 VS 数据仓库之争？阿里提出大数据架构新概念：湖仓一体

数据仓库和数据湖的区别到底是什么，是技术路线之争？是数据管理方式之争？二者是水火不容还是其实可以和谐共存，甚至互为补充？

2020-12-02 17:20:58

数据仓库阿里云数据湖

5000多张数据表，如何用SQL迁移到数据仓库？

需求背景最近公司打算集中梳理几大业务系统的数据，希望将各个业务系统中的数据集中到数据仓库中。总共有5000多张数据表，但是好在业务数据量没有像电商那么庞大，也就几十个G。

2020-12-02 14:38:21

SQL 数据库 MySQL

有了数据湖，距离数据仓库消失还有几年？

很多人跟我一样，对于数据湖充满好奇，也许还读了不少数据湖文章，但无论别人怎么说，你还是会觉得难以把握数据湖的本质。

2020-10-20 18:59:40

数据湖数据仓库采集

关于数据仓库的数据模型的思考

任何需求均来源于业务 , 业务决定了需求 , 需求分析的正确与否是关系到项目成败的关键所在 , 从任何角度都可以说项目是由业务驱动的所以数据仓库项目也是由业务所驱动的。

2020-10-14 06:28:38

数据仓库模型

为什么你的数据仓库项目推进不下去？

不同的团队会面临不同的难题，今天居士简单聊一下这几年自己亲身经历以及帮助一些小伙伴解惑后的一些感想。

2020-10-13 06:52:50

数据仓库项目

数据仓库Hive vs 准实时分析系统Impala

Impala是用于处理存储在Hadoop集群中的大量数据的MPP(大规模并行处理)SQL查询引擎。它是一个用C++和Java编写的开源软件。与其他Hadoop的SQL引擎相比，它提供了高性能和低延迟。

2020-09-17 14:32:18

数据仓库 Hive Impala

报表自动化就是连接数据库？错，它打开了数据仓库的大门

本文简单的介绍了一种数据仓库的分层设计，主要提及了 OBS 层、DW 层、DM 层，这里过多的说了概念，后面开始抛出细节。比如后面让我们来聊聊 DW 层建模方法之维度建模。

2020-09-04 10:01:00

数据仓库自动化报表

4分钟带你看懂究竟什么是数据仓库？

2020-07-07 07:57:45

选择现代数据仓库满足你的数据需求

现在，大数据平台的使用范围包括车间机器人访问现代数据仓库以改善其机器人动作，到日常工作中业务人员使用越来越智能的分析工具。

2020-06-22 17:26:36

数据仓库数据数据库

数据仓库DWS与数据库RDS、MapReduce的区别

华为云618年中云钜惠，大数据+AI专场热销中，精选10+大数据、AI产品，有很多朋友对于数据仓库DWS、数据库RDS、MapReduce这3个服务“傻傻”分不清楚，下面就图文结合介绍三个产品之间的区别，如何根据业务场景选择适合的产品。

2020-06-19 17:43:51

数据仓库：OLTP与OLAP查询

相比之下，数据仓库是一个独立的数据库，分析人员可以查询其内心的内容，而不会影响OLTP操作。数据仓库包含公司所有各种OLTP系统中数据的只读副本。

2020-06-11 08:56:34

数据仓库数据库数据

未卜先知，现代化数据仓库带来强大商业智能

在当前这个数据爆炸的时代，企业数字化程度越高，越会重视数据仓库的应用。对数据仓库的数据进行多维度分析，在看似杂乱无章的数据中寻找规律、预测趋势，从而未卜先知，做出正确的商业决策。现代化数据仓库的应用不仅可以提高企业的决策能力、洞察发现力和流程优化能力，同时还有助于发掘新商机，加快业务发展步伐。

2020-05-20 10:33:48

Cloudera 商业智能数据仓库

阿里云自研技术拿下世界第一云原生数据仓库AnalyticDB登顶TPC-DS

由于传统数据库厂商对分布式和并行能力的支持欠佳，该榜单自2006年公布以来，还没有一家传统数据库厂商能通过测试，目前也仅有3家企业上榜。

2020-05-14 16:11:20

如何在Hadoop上建立数据仓库

大数据平台上的数据仓库是许多组织正在探索的标准用例。采用这种方法的原因可能是大数据平台提供的许多灵活性之一。

2020-04-06 13:52:45

数据仓库大数据平台 Hadoop

探索Hadoop与数据仓库之间的关系

在大数据世界中用于BI和分析的新平台的需求，并描述了三种常用的基本数据架构：数据仓库，大规模并行处理系统(MPP)和Hadoop。

2020-04-03 15:22:49

Hadoop 数据仓库数据库

干货：数据仓库、OLAP和数据挖掘、统计分析的关系和区别分析

数据挖掘(Data Mining)，又称为数据库中的知识发现(Knowledge Discovery in Database, KDD)，就是从大量数据中获取有效的、新颖的、潜在有用的、最终可理解的模式的非平凡过程，简单的说，数据挖掘就是从大量数据中提取或“挖掘”知识。

2020-03-31 14:57:56

数据挖掘 OLAP 统计

一套 SQL 搞定数据仓库？Flink有了新尝试

数据仓库是公司数据发展到一定规模后必然需要提供的一种基础服务，也是“数据智能”建设的基础环节。迅速获取数据反馈不仅有利于改善产品及用户体验，更有利于公司的科学决策，因此获取数据的实时性尤为重要。

2020-03-19 12:15:09

SQL Flink 数仓

如何首次构建云数据仓库

对很多组织来说，如何首次成功地构建云数据仓库是一个难题，因此需要了解一些知识和技巧。

2020-02-17 11:37:54

大数据数据仓库技术

基于Flink构建的实时数据仓库，这才是OPPO数据中台的基础

大家都知道 OPPO 是做智能手机的，但并不知道 OPPO 与互联网以及大数据有什么关系，下图概要介绍了 OPPO 的业务与数据情况。

2020-02-05 15:09:38

数据仓库数据中台 OPPO

大数据时代，数据湖并不能完全取代数据仓库

数据仓库为组织了解其历史业务表现和推动持续运营提供了一个接入窗口，为数据分析师和业务用户提供了诸如客户行为、业务趋势、运营效率和销售等方面的信息。

2020-01-08 21:53:06

大数据数据仓库数据湖

大数据之数据仓库分层

数据分层是一套行之有效的数据组织和管理方法，使得数据体系更有序。每一个数据分层都有它的作用域和职责，在使用表的时候能更方便的定位和理解。

2020-01-03 09:40:13

大数据数据仓库分层

马蜂窝大数据架构详解：小白都能懂的数据仓库与数据中台

最近几年，数据中台概念的热度一直不减。2018 年起，马蜂窝也开始了自己的数据中台探索之路。数据中台到底是什么?要不要建?和数据仓库有什么本质的区别?相信很多企业都在关注这些问题。

2019-12-17 14:59:27

数据中台数据仓库马蜂窝

云计算数据仓库的下一步是什么

如果说多云是当今数据仓库采用的战略，那么跨云就是它对未来的愿景。这种预测来自于一种普遍的需求，即在不同云计算提供商的不同区域之间，甚至在不同的云平台之间无缝地移动和交换数据。

2019-10-28 13:54:45

多云数据云计算

辨析BI、数据仓库、数据湖和数据中台内涵及差异点

随着大数据技术的不断更新和迭代，数据管理工具得到了飞速的发展，相关概念如雨后春笋一般应运而生，如从最初决策支持系统(DSS)到商业智能(BI)、数据仓库、数据湖、数据中台等。

2019-10-09 16:38:50

数据平台架构

7大云计算数据仓库

优秀云计算数据仓库展示了近年来云计算数据仓库市场发展的特性，因为很多企业更多地采用云计算，并减少了自己的物理数据中心足迹。

2019-09-26 10:56:04

云计算数据中心公共云

云数据仓库Snowflake、Panoply和Repods的全面大比拼译文

您在找合适的云数据仓库平台吗?本文为您比较三种常见的平台，全面为你分析它们在不同方面的优缺点。

2019-09-12 09:03:11

架构数据仓库云服务

数据分析必不可少之数据仓库！

数据仓库的目的是构建面向分析的集成化数据环境，为企业提供决策支持(Decision Support)。数据仓库本身并不“生产”任何数据，同时自身也不需要“消费”任何的数据，数据来源于外部，并且开放给外部应用，这也是为什么叫“仓库”，而不叫“工厂”的原因。

2019-06-06 14:08:37

数据仓库数据分析数据报表

上一页 1 2 3 4 5 6 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营