51CTO首页
AI.x社区
博客
学堂
精品班
直播训练营
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

大数据

8797内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8797 条
税收大数据折射经济活力
4月23日，国家税务总局集中发布10组税收数据。数据显示，一季度我国经济运行呈现稳中加固、稳中向好态势，市场主体活力有效激发，创新发展加快推进，中国经济展现出韧性和活力。

2021-04-26 22:32:57

大数据税收经济
SQL—大数据环境的重要工具 译文
这篇文章将帮助您理解为什么SQL对于在大数据领域开始职业生涯或从传统RDBMS转型的人来说是一种必不可少的编程语言。本文还将回顾Hadoop引擎上广泛使用的，可以有效地用于数据转换和探索的SQL语言。

2021-04-26 16:52:13

大数据SQL
如何通过数据驱动的分析方法实现可持续发展
采用数据驱动的方法来管理建筑物的能源绩效不能被低估。只有通过测量、收集和分析这些数据，企业才能前进到如何最好地减少它。

2021-04-26 15:43:59

数据驱动智能楼宇楼宇自动化
对大数据杀熟的适用法规初析
大数据杀熟正在成为继二选一之后，反垄断的一个备选目标。有别于二选一，大数据杀熟是一个模糊概念，它是一系列行为的集合，其中既有合理成分，又有不合理的地方。因此在规制的时候，应当分别情况，区别对待，以达到兴利除弊的目的。

2021-04-26 14:29:56

大数据经济信息
五一去哪里人最少？爬取3000条数据，分析出性价比最好的地方
从实际效果上看更能证明，距离五一假期还有整整一个星期，各大旅游出行app上的火车票、机票、热门景点门票、酒店民宿就已经被抢售一空了，今年的旅游出行将是五一假期最火热的内容。

2021-04-26 11:43:18

大数据数据分析五一
什么是视频元数据？
尽管具有巨大的潜力，但许多人仍不知道什么是元数据以及如何在监视应用中使用它。

2021-04-25 19:00:55

大数据视频分析人工智能
Oracle：让GoldenGate成为云原生的、完全托管的服务 译文
4月21日，甲骨文宣布将把其流行的实时数据结构GoldenGate作为一种高度自动化、完全托管的云原生服务提供给用户。目的是将这项服务推向更广阔的市场——让非技术用户能够使用，也更容易使用。

2021-04-25 17:36:07

OracleGoldenGate云原生
冠状病毒疫情如何改变企业的数据分析和商业智能
在冠状病毒疫情爆发一年之后，很多组织的工作方式和业务发生了许多变化。很多组织加快了数字化转型，将更多的业务转移到了云中，并将更多的工作人员从办公室转移到了家庭。组织看待数据、商业智能和卓越分析中心的方式在过去一年中也发生了变化。

2021-04-25 15:19:19

数据分析商业智能大数据
大数据预测：今年五一出行人数将创历史新高
长达5天的五一黄金周假期即将到来，人们积蓄已久的出行需求也将得到释放。据百度地图大数据预测，2021年五一假期期间，社会出行规模和出行人数将创历史新高。

2021-04-23 23:18:37

大数据交通五一
数据分析师应该如何构建指标体系
在互联网行业中，对指标的一般定义为：指标，是反映某种事物或现象，描述在一定时间和条件下的规模、程度、比例、结构等概念，通常由指标名称和指标数值组成。

2021-04-23 14:16:13

数据分析师数据指标运营工作
大数据与人工智能是怎么改变企业文化的
大数据与人工智能，能给商业文化的重大转变带来很多好处。那，大数据与人工智能是怎么改变企业文化的？

2021-04-23 10:13:59

大数据人工智能医疗
2021中国国际大数据产业博览会新闻发布会在京召开：2021数博会下月在贵阳举行
4月22日上午，2021中国国际大数据产业博览会新闻发布会在北京召开，记者从会上获悉，经党中央、国务院批准，2021数博会定于今年5月26日至28日在贵阳市举行。

2021-04-22 15:16:37

数博会大数据治理
WakeData惟客数据完成2500万美元B+轮融资
近日，企业数字化升级服务商WakeData惟客数据宣布完成2500万美元B+轮融资，由腾讯与红杉中国联合领投，IDG资本、红点中国跟投。本轮融资由元启资本担任独家财务顾问。截至目前，WakeData每一轮融资均有老股东追投增持，可见资本市场对其业务发展持续的信心。

2021-04-22 11:10:45

WakeData惟客数
从体检报告来看数据展现方式的重要性
咱们做应用性能优化，一个接口的性能从1秒，优化到了0.8秒。感觉有限，但如果换成毫秒，虽然只是表述单位的差异，但从1000毫秒优化到了 800毫秒，就会有 200 的感觉， 比 0.2 感觉要强多了。

2021-04-22 07:29:46

数据展现方式
Hive千亿级数据倾斜解决方案
MapReduce和Spark中的数据倾斜解决方案原理都是类似的，以下讨论Hive使用MapReduce引擎引发的数据倾斜，Spark数据倾斜也可以此为参照。

2021-04-22 07:21:55

Hive数据倾斜
七张图，看懂数据分析如何助力运营
讲数据分析体系的文章很多，经常是开篇一句：互联网分析体系……，下边几百个指标blabla汹涌而出。搞得很多同学很晕菜：这么多指标，实际中到底怎么看?今天系统讲解一下。

2021-04-21 12:05:45

分析数据运营
5个例子比较Python Pandas 和R data.table
Python和R是数据科学生态系统中的两种主要语言。它们都提供了丰富的功能选择并且能够加速和改进数据科学工作流程。

2021-04-21 11:08:00

数据分析数据集Python
大数据有什么作用？为什么企业家都开始学习大数据？
大数据是指以多元形式，许多来源搜集而来的庞大数据组，往往具有实时性。但是大数据的大，并不是指数据数量多，而是指数据中隐藏的大价值。通过分析事物相关的所有数据，预测事情发生的可能性，进而做出准确预判。这种能力被视为人工智能，是大数据的核心。

2021-04-21 08:46:19

大数据大数据技术
扩展 Spark SQL 解析，你知道吗?
大家好久不见了，最近生活发生了很多变故，同时我也大病了一场，希望一切都尽快好起来吧。今天跟大家分享下Spark吧，谈谈如何修改Spark SQL解析，让其更符合你的业务逻辑。好，我们开始吧...

2021-04-20 23:16:06

SparkSQL语法
常见的21种数据挖掘工具 译文
目前，市场上有数量众多的数据挖掘工具。本文从7个分类，综合介绍与比较21种常见的工具。

2021-04-20 09:00:00

数据分析数据挖掘工具
为什么说大数据发展值得被重视？发展趋势在哪里？
大数据已经开始慢慢地走进了大众的视野，让越来越多人熟知。随着大数据应用技术的不断发展，其发展前景也被越来越来的人看好。可以说，未来的大数据不论是企业还是个人都值得倍加重视。

2021-04-19 21:16:18

大数据大数据动向
面试官：说说什么是Java内存模型？
由于CPU 和主内存间存在数量级的速率差，想到了引入了多级高速缓存的传统硬件内存架构来解决，多级高速缓存作为 CPU 和主内间的缓冲提升了整体性能。解决了速率差的问题，却又带来了缓存一致性问题。

2021-04-19 18:56:58

大数字符串运算
现代数据分析的5个视角
成功进行数据分析的秘诀不在于选择和实施完美的技术，而在于培养对普及分析可以产生更好决策和出众成果的广泛理解。通常情况下，人们可以消除技术缺陷或需求误解。但是如果无法改变心态的话，那么就很少有人会使用刚刚构建的分析工具。

2021-04-19 14:18:17

数据分析互联网运营大数据
用户画像被批“没啥用”！到底咋做才有用？
今天继续分享如何写数据分析报告。很多同学问：“静态数据的报告该咋写”。尤其以用户画像报告为甚。很多时候业务提了需求：看看我们的用户画像。结果写出来报告被批：我都知道了，你写这有啥意义。到底咋弄?

2021-04-19 11:27:25

用户画像数据
图算法系列之无向图的数据结构
从本篇开始我们将会一起来学习图相关的算法，图算有很多相当实用算法，比如：垃圾回收器的标记清除算法、地图上求路径的最短距离、拓扑排序等。在开始学习这些算法之前我们需要先来了解下图的基本定义，以及使用哪种数据结构来表示一张图，本篇我们先从无向图开始学习。

2021-04-19 09:08:19

无向图数据结构
Hadoop集群搭建及Python操作
HDFS 文件存储集群的优点是：配置要求低、易于扩展、效率比较高、非常适合大批量文件存储，而且可以提供 web 管理页面，提供非常好的第三方库。在进行 web 开发时，作为文件和图片存储库也是非常好的选择。

2021-04-19 08:52:58

Hadoop集群搭建Python
Hive中的内部表、外部表、分区表和分桶表
在Hive数据仓库中，重要点就是Hive中的四个表。Hive 中的表分为内部表、外部表、分区表和分桶表。Hive 也会删除这个表中数据。管理表不适合和其他工具共享数据。

2021-04-19 08:16:38

Hive数据类型大数据技术
SQL、Pandas和Spark：这个库，实现了三大数据分析工具的大一统
由于Spark是基于Scala语言实现的大数据组件，而Scala语言又是运行在JVM虚拟机上的，所以Spark自然依赖JDK，截止目前为止JDK8依然可用，而且几乎是安装各大数据组件时的首选。所以搭建pyspark环境首先需要安装JDK8，而后这里介绍两种方式搭建pyspark运行环境。

2021-04-18 22:18:39

SQL数据分析工具
腾讯发布自研第四代数智融合计算平台“腾讯大数据-天工”，引领大数据计算进入下一时代
4月18日，在 “腾讯大数据高峰论坛”上，腾讯正式发布自研第四代数智融合计算平台“腾讯大数据-天工”，该平台以最新的“数据协同、技术互通、平台大脑”技术理念为基础，在确保数据安全这一重要前提下，真正实现万亿级数据分析无人“自动驾驶”，进而推动大数据和人工智能技术融合为一，引领全球大数据计算进入下一时代。

2021-04-18 19:11:34

腾讯云计算平台天工
数据仓库环境现代化工具和技巧
数据仓库历史悠久，这里的基本想法是，大多数企业建立各种应用程序来自动化其基本业务流程，而这些业务流程各自发展，从而产生多个版本的数据。

2021-04-18 18:43:25

数据仓库数据数据库
为什么数据在智能照明中如此重要？
智能建筑和照明市场继续受到对能源效率的需求以及零碳建筑的目标的推动，而最近，Covid-19大流行，这也增加了对拥有明显幸福感的灵活适应空间的需求。

2021-04-16 17:37:28

数据智能照明物联网
简述数据仓库，数据集市，数据湖泊、和运营数据存储
互联网和大规模技术开发使得当今世界中数据的爆炸性增长。企业决策者希望研究数据之间的关系，点击数据的隐藏功能并分析和探索更深层次的数据。

2021-04-16 10:21:50

数据库数据湖数据
皇帝选妃与推荐算法机制
这几年随着大数据，人工智能，机器学习，数据挖掘等等概念的兴起，每一个数分析师都或多或少接触过推荐算法相关的分析，做算法分析的前提是要明白目前“推荐算法” 的基本构成，掌握这些常规的业务知识，即使不懂具体的算法实现过程，也能对算法进行有效的分析。

2021-04-16 07:32:34

推荐算法机制
聊聊Hive数据类型和简单使用
可以将本地文件导入到HIve中，我们先把文件上传到HDFS，然后使用HDFS将数据导入到Hive中。

2021-04-16 07:19:04

Hive数据类型Hql
图表分析2020年和2018年北京积分落户数据
一年一度的积分落户工作马上要开始了，刚好对于2020年的分数情况还做了一些统计，总体的感觉就是：水涨船高。

2021-04-16 06:40:31

积分落户数据
大数据专业毕业后该何去何从？
我们总是说现在进入了一个大数据时代，所以在当前的大数据时代背景下，大数据专业是不错的选择，随着大数据技术逐渐开始落地应用，这个行业已经释放出了大量的人才需求，不仅仅是互联网行业，传统行业也开始需要大量的大数据行业人才。

2021-04-15 21:56:14

大数据技术数据分析
大数据的时代已经全面来临？
未来5年大数据市场将由重基础设施向重应用落地转移，随着数据量的增长，数据治理和模型算法将持续受到关注。政府、金融和电信将保持持续增长的态势，而医疗和新零售将成为下一个大数据技术投入的新领域。

2021-04-15 17:39:39

大数据互联网大数据应用
区块链+大数据：万物互联时代的“CP组合”
这个时代，区块链和大数据是许多公司日程中的重要新兴技术，两者在未来都将改变企业和组织的运营方式。在过去，区块链和大数据还有其他的技术都是以一种单独的方式进行开发，乍一看可能会认为这些技术是互斥的，但是这个观点正在迅速改变。

2021-04-15 14:57:38

区块链大数据
Hadoop和大数据正式走到头了：13个相关的Apache开源项目宣布报废
Apache软件基金会已在短短11天内宣布报废13个与大数据有关的Apache项目，其中包括Sentry、Tajo和Falcon。

2021-04-15 11:38:52

大数据IT互联网
大数据开发：告诉你什么是Maven?
关于大数据开发的Maven可谓是一个略微复杂的构成，从基础概念到它的具体用途都可谓是有满满的干货知识。这里先用一句话来进行概括，Maven 是一个项目管理工具，可以对 Java 项目进行构建、依赖管理，是一个自动化构建工具。

2021-04-15 09:37:05

大数据Maven
数据仓库和Hive环境搭建
数据仓库，英文名称为Data Warehouse，可简写为DW或DWH。数据仓库顾名思义，是一个很大的数据存储集合，出于企业的分析性报告和决策支持目的而创建，对多样的业务数据进行筛选与整合。

2021-04-15 07:40:44

数据仓库Hive环境搭建
想要成为数据分析师，这三款常用的数据分析工具你要知道
随着数字化在生活中的应用越来越多，未来，我们生活工作中的每一个行为，都会产生数据，数据是庞大而复杂的，因此需要专门的数据分析工具来进行处理。

2021-04-14 23:07:22

数据分析工具容器
推荐四款可视化工具，解决99%的可视化大屏需求
小编尝试了使用excel制作图表，由于操作复杂，小编放弃了，于是小编在网上找到了以下四种可视化工具，现在我们来看一下。

2021-04-14 16:20:39

可视化大数据工具
脱离算法面临“两难抉择”专家建议开展场景化精细化治理
算法基于人的行为而产生“锁定效应”。虽然立法也赋予了用户拒绝个性化推荐的权利，但对许多用户而言，完全拒绝算法追踪，可能会影响平台内其他功能的使用。因此，还需对算法进行场景化和精细化治理。

2021-04-14 14:37:05

算法大数据场景化
详解大数据开发-HDFS入门
HDFS(Hadoop Distributed File System)是hadoop生态系统的一个重要组成部分，是Hadoop中的的存储组件，在整个Hadoop中的地位非同一般，也是最基础的一部分，因为它涉及到数据存储，MapReduce等计算模型都要依赖于存储在HDFS中的数据。

2021-04-14 09:04:03

大数据HDFS大数据开发
HDFS中的Java和Python API接口连接
今天进入HDFS中的Java和Python的API操作，后面可能介绍Scala的相关的。

2021-04-14 08:51:55

HDFSJavaPython
Hbase集群挂掉的一次惊险经历
这是以前的一次hbase集群异常事故，由于不规范操作，集群无法启动，在腾讯云大佬的帮助下，花了一个周末才修好，真的是一次难忘的回忆。

2021-04-13 18:17:48

Hbase集群配置
大数据助力教育评价现代化
教育是国之大计、党之大计。加快推进教育现代化，建设高质量教育目标，需要破解教育评价改革这个难题。

2021-04-13 16:13:38

大数据教育科学
为什么说大数据的发展值得被加倍重视？
大数据已经开始慢慢的走进了大众的视野，让越来越多的人熟知而伴随着大数据在电商领域的“杀熟”，在新闻行业助力“今日头条”的崛起，也让各个行业看到了大数据带来的商机。

2021-04-13 15:54:07

大数据人工智能技术
谷歌推出新开源语言Logica：用于大数据处理
在推出诸如 Go 和 Dart 等编程语言之后，谷歌工程师现在又推出了全新的 Logica。它是此前谷歌推出编程语言 Yedalog 的继任者，可以编译成 SQL，并能在 Google BigQuery 上运行，实验性地支持 PostgreSQL 和 SQLite 数据库。

2021-04-13 14:39:08

谷歌Logica语言
上一页 1 ··· 3940414243 ··· 176
点赞

51CTO技术栈公众号

业务
速览
在线客服