51CTO首页
AI.x社区
博客
学堂
精品班
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

大数据

8917内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8917 条
下一代 IBM Cloud Pak for Data 及其新型数据经纬：5大必知之事
今天，IBM 把基于 AI 的新能力注入 Cloud Pak for Data 的智能数据经纬，其中包括一项名为 AutoSQL（结构化查询语言）的突破性技术。

2021-07-23 14:04:44

大数据AIIBM
我国大数据产业领跑全球，“数据红利”期正稳步到来
近年来，随着5G网络的大力布局，大数据产业几乎同步高速发展，已融入到经济生活的方方面面。大数据作为5G新基建的重要一环，无论在民生还是工业领域，都能起到无可替代的作用。

2021-07-23 11:35:23

大数据数据红利运营商
那些难以摆脱的“大数据困扰”
在大数据时代，公民的个人信息还是隐私吗?记者调查发现，包括扫码点餐，授权个人信息后才能阅读文章、享受服务的程序，其实都是商家、公众号引流的手段。通过一个小程序，商家就能收到用户微信昵称、电话号码等重要信息。

2021-07-23 11:32:05

大数据数据处理杀熟
数据规模爆炸性增长，云原生数据仓库数据化运营实战分享
在日前的2021阿里云金融数据智能峰会——《云原生驱动数智化运营的“增长黑马”》专场上，阿里云数据库资深技术专家魏闯先 从数据价值链路角度切入，为大家解读云原生数据仓库如何支撑数据化运营、全链路营销和阿里集团双11业务，并展示金融客户最佳实践案例和应用场景。本文内容根据演讲录音及PPT整理而成。

2021-07-22 10:04:13

云原生数据仓库数据化运营
值得关注的五大数据可视化新兴趋势
随着信息世界技术的进步，数据可视化正成为每个企业和组织都应该掌握的一项重要技能。

2021-07-21 12:00:41

数据可视化人工智能
数据驱动算法在机器学习中的应用
机器学习作为一个概念，与提高计算机使用算法和神经网络模型学习的能力有关，并能更快更有效地执行各种任务。机器学习或ML通过使用数据或数据集来帮助建立模型来做出决策。

2021-07-21 11:25:17

机器学习?AI人工智能
大数据可能改变证券交易的状态
大数据技术不断重塑商业格局，人们已经开始意识到在决策过程中使用数据和分析的重要性。虽然中小型企业尚未适应这一概念，但大型企业在数据方面进行了大量投资。股票交易是一个大数据和数据分析技术可以发挥重要作用的领域。

2021-07-21 10:42:00

大数据数据分析证券交易
痛苦调优10小时，我把 Spark 脚本运行时间从15小时缩短到12分钟！
周一我就有个困惑，还写成文章了：如何从 Spark 的 DataFrame 中取出具体某一行，里面提了自己猜想的几种解决方案 没想到这么快就要面对这个问题了，我用小孩子都听得懂的例子描述一下我在干什么。

2021-07-21 07:55:22

技术
Spark 大数据处理最佳实践
本文主要案例介绍如何利用Spark 大数据技术。

2021-07-20 15:37:37

数据开发大数据Spark
Flink + Iceberg + 对象存储，构建数据湖方案
数据源上可能会有各种数据，不同的数据源和不同格式。比如说事物数据，日志，埋点信息，IOT 等。这些数据经过一些流然后进入计算平台，这个时候它需要一个结构化的方案，把数据组织放到一个存储平台上，然后供后端的数据应用进行实时或者定时的查询。

2021-07-20 11:52:03

FlinkIceberg 对象存储
大数据“杀熟” 今后行不通了
在网上消费越来越普遍的现今，大数据“杀熟”受到越来越多市民的关注，而这一暗藏的乱象也将因为监管的更加严格，有望得到有效遏制。

2021-07-19 22:45:10

大数据消费监管
大数据杀熟，杀的是互联网经济的未来
这些年，互联网经济的蓬勃发展带给人们衣食住行诸多便利，但同时广大消费者也苦“大数据杀熟”久矣。到目前为止，“大数据杀熟”并没有明确的法律界定，还仅停留在学术研究和大众口口相传的商业概念里。

2021-07-19 17:00:50

大数据互联网经济
选择分析工具时要考虑的十一个因素
数据分析工具是一种收集和分析大量用户数据以发现模式并预测用户行为的软件。企业可以使用数据分析工具，通过关联应用程序在使用特定功能时花费的时间等因素来评估参与度。

2021-07-19 13:52:17

分析工具软件大数据
数据治理的六个优秀实践
许多组织正在进行的数字化转型也将使强大的数据治理对企业来说变的更加重要，因为企业的成功在很大程度上就取决于数据的可靠性、安全性以及能否在正确的时间提供给正确的人。

2021-07-19 10:06:30

数据治理数字化转型CIO
对比四大典型的云数据仓库：Snowflake、Redshift、BigQuery和Azure 译文
本文从特征参数、技术规格、以及定价模型等方面，为您综合比较了Snowflake、Redshift、BigQuery、以及Azure，这四种典型的云数据仓库的优缺点，并给出了选型时的各项参考因素。

2021-07-19 09:00:00

数据库数据分析技术
如何从 Spark 的 DataFrame 中取出具体某一行？
Spark 中 DataFrame 是 RDD 的扩展，限于其分布式与弹性内存特性，我们没法直接进行类似 df.iloc(r, c) 的操作来取出其某一行。

2021-07-19 07:58:02

Spark DataFrame 分布式
个性化推荐是不是杀熟？算法不能违背公平之道
电商平台大数据杀熟，一直饱受消费者诟病。除了赤裸裸地抬高价格，还有一种比较隐蔽的杀熟，不易为人觉察。

2021-07-18 22:47:08

大数据电商算法
大数据时代，移动联通大数据技术的价值，你掌握了多少
大数据技术就是在多种类型的大量数据信息中，快速获得有使用价值信息的技术性，然后做到大数据精准营销。拥有大量信息本身并不能造就出多少使用价值，必须选用具体方法进行处理分析才能够获得其智能化的，多方面的有使用价值的信息。

2021-07-18 10:40:53

大数据大数据技术
数据分析的七种武器
对于数据分析而言，我认为也有 7 种非常厉害的武器，它们分别对应的是：Excel、Tableau、SQL、SPSS、SAS、R、Python。

2021-07-16 09:55:46

数据工具软件
Cloudera与阿里云强强联手，助力中国企业加速数据驱动之旅
企业数据云公司Cloudera（NYSE：CLDR）今日宣布与阿里云签署合作协议，Cloudera Data Platform（CDP）将在大中华区入驻阿里云。此次合作旨在帮助更多大中华区的企业在上云过程中，有效运用数据实现业务灵活性。

2021-07-15 14:28:59

Cloudera阿里云数据
数组： 一种非常基础且重要的数据结构
数组是一种非常基础且重要的数据结构，很多复杂的数据结构都是基于数组实现的。深入理解数据的存储原理和特点，有利于我们在实际开发工作中，充分发挥数据的优势。

2021-07-14 23:55:18

数据结构数组
Quick BI为什么能从一众商业智能BI产品中跑出重围
尽管已有包括Quick BI在内的头部产品沉淀相当一批成功案例,但对于BI赛道的各大玩家而言,眼下需要思考的还在于两个方面:其一,如何结合AI技术快速完成传统BI平台到新智能平台的升级。其二,如何聚焦于企业场景和各个业务环节,保证方案落地。

2021-07-14 09:35:25

数字化
大数据与云计算之间的关系
雾计算和边缘计算FEC（Fog and Edge Computing）通过填补云和物的差距以提供服务连续性来完成物联网中的云计算。本文将描述FEC的优势并讨论它如何实现这些优势。

2021-07-13 19:33:41

大数据云计算
严惩“大数据杀熟”让算法更好服务用户
大数据“杀熟”是指电子商务平台经营者利用大数据分析、算法等技术手段，根据消费者或者其他经营者的偏好、交易习惯等特征对其进行“精准画像”，基于成本或正当营销策略之外的因素，对同一商品或服务在同等交易条件下设置不同价格或进行特定推送，由此侵犯消费者合法权益的行为。

2021-07-13 19:19:57

大数据大数据杀熟
吉林省委书记景俊海调研长白山基地 国信优易CEO王亚松汇报建设成果
国信优易以丰富的大数据基地建设经验和成熟的大数据技术，为长白山基地的未来发展保驾护航。目前，在国信优易自主研发的数据操作系统DataOS之上，“数字长白山”的智能基座已经落地。

2021-07-13 17:15:03

国信优易大数据
只罚“亿点点”！新规在即，大数据“杀熟”该消停了
近日，市场监管总局发布了《价格违法行为行政处罚规定(修订征求意见稿)》(以下简称《规定》)，坚决对大数据"杀熟"说不!

2021-07-13 10:04:07

大数据
从零设计可视化大屏搭建引擎
可视化大屏搭建平台的一些设计思路和效果演示， 这篇文章我会就 如何设计可视化大屏搭建引擎 这一主题， 详细介绍一下实现原理。

2021-07-12 17:23:47

零设计可视化引擎
边缘计算：最快数据处理背后的技术
边缘计算技术正在发展，因为它为企业提供了优势。它有助于以最快的方式获得准确的信息。企业产生的75%的数据可以在传统的集中数据中心或云之外创建和处理，只是需要将数据和存储尽可能地移动到数据实际处理的计算边缘。

2021-07-12 15:00:48

边缘计算数据处理IT企业
为什么预测分析对零售企业如此重要
预测分析是一种对企业越来越重要的策略。利用机器学习来分析企业收集的数据，现在可以用于对未来做出更准确的预测。

2021-07-12 14:15:25

预测分析机器学习大数据
预测分析的四个成功案例
预测分析工具会将统计建模、预测和机器学习等技术应用于描述性和诊断性的分析输出结果，以对未来的结果进行预测。

2021-07-12 10:38:51

预测分析数据分析大数据
ZooKeeper 分布式锁 Curator 源码之三：可重入锁并发加锁
在了解了加锁和锁重入之后，最需要了解的还是在分布式场景下或者多线程并发加锁是如何处理的?

2021-07-10 10:02:30

ZooKeeperCurator并发
我用Excel发现了数据分析的本质：回归分析
其实绝大多数的数据分析问题，都可以归纳为一个问题：相关性问题。相关性分析是数据统计学中的基础思想，主要就是为了探究数据之间是否具有关联性，简单说就是X与Y或者X与Y、Z等之间的变化是否有关联。

2021-07-10 07:40:27

Excel数据分析大数据
农业大数据能带来什么，对农村发展有什么作用？
农业大数据的发展应用是建设农业农村现代化、实施乡村振兴战略、推进农业农村信息化发展和推动我国从农业大国走向农业强国的有力抓手。那农业大数据能带来什么，对农村发展有什么作用？接下来就和小编了解了解吧。

2021-07-09 20:12:48

大数据农业
业财一体趋势下，FONE如何做业财融合的“超级大脑”？
为了使财务系统更具效能，不少企业开始推行预算管理的“自我进化”。有专家认为，传统预算管理的确存在一些弊端，但预算管理作为现代企业管理的奠基石，其对企业管理的重要性是毋庸置疑的。对此，“全面预算”作为能把组织所有关键职能融会贯通的财务管理方法之一，被推到了前台。

2021-07-09 15:42:42

财务大数据
Spark Streaming精进之前必须了解的基本概念
Spark是一个快速的，多用途的计算系统。这是来自官网的自我介绍。一般敢自称系统的都是有两把刷子的，况且还是多用途的计算系统。Spark计算系统包含如下功能组件。

2021-07-09 10:27:12

SparkStreaming系统
ZooKeeper 分布式锁 Curator 源码之二：可重入锁重复加锁和锁释放
当锁需要释放的时候，只需要调用 lock.release() 进行释放即可，具体是如何释放的呢？

2021-07-09 06:48:31

ZooKeeperCurator源码
IDC：预计到2025年中国商业智能软件市场规模将达13.3亿美元
2020年中国商业智能软件市场规模为5.8亿美元，同比增长17.1%。预计到2025年，中国商业智能软件市场规模将达到13.3亿美元，未来5年整体市场年复合增长率为17.9%。

2021-07-08 15:44:38

智能软件大数据IDC
大数据、5G 和手术机器人正在改变医疗保健
技术进步带来的每个部门工作效率的巨大提高也使医疗保健部门受益。人工智能、机器学习、大数据服务和机器人帮助手术的引入已被证明提高了卫生部门人员的工作能力。

2021-07-08 10:07:18

5G大数据机器人
大数据“杀熟”最高可罚五千万元
App“不全面授权就不让用”、大数据“杀熟”、个人信息收集任性等问题长时间困扰互联网用户。对于以上问题，《条例》明确进行了限制，对于违反相关条例的内容将给予重罚。

2021-07-08 09:44:22

大数据信息收集App
ZooKeeper 分布式锁 Curator 源码 之一：可重入锁
一般工作中常用的分布式锁，就是基于 Redis 和 ZooKeeper，前面已经介绍完了 Redisson 锁相关的源码，下面一起看看基于 ZooKeeper 的锁。也就是 Curator 这个框架。

2021-07-08 09:21:17

ZooKeeper分布式锁 Curator
用智慧监管有效反制大数据“杀熟”
根据《价格违法行为行政处罚规定(修订征求意见稿)》，对“杀熟”者除了处以上一年度销售总额1‰以上5‰以下罚款外，对情节严重者还可责令停业整顿，或者吊销营业执照。

2021-07-08 08:38:09

大数据大数据“杀熟”数据监管
《深圳经济特区数据条例》发布，从四方面探索大数据发展
7月6日，深圳公布《深圳经济特区数据条例》，并计划于明年1月1日起实施。作为国内数据领域首部基础性、综合性立法，《条例》对我国探索发展数字经济带来重要作用。

2021-07-07 17:50:08

大数据发展大数据数据
「详谈 Delta Lake」系列技术专题 之 湖仓一体（Lakehouse）
本文翻译自大数据技术公司 Databricks 针对数据湖 Delta Lake 系列技术文章。众所周知，Databricks 主导着开源大数据社区 Apache Spark、Delta Lake 以及 ML Flow 等众多热门技术，而 Delta Lake 作为数据湖核心存储引擎方案给企业带来诸多的优势。

2021-07-07 10:13:56

大数据Delta Lake 湖仓一体
大数据：不容忽视的十大趋势
经过数年发展，我国的大数据产业日渐成熟，很多创新技术从概念走向落地。那么，我国大数据产业发展呈现哪些重要趋势？

2021-07-07 09:45:20

大数据数据安全数据技术
2021年风险市场技术奖揭晓，Cloudera荣膺“年度数据管理产品”
日前，Cloudera在2021年风险市场技术奖(Risk Markets Technology Awards 2021)评选中荣获“年度数据管理产品奖”，这意味着Cloudera 旗下的数据管理平台(Cloudera Data Platform)赢得了对风险控制要求极为严格的金融市场的认可。

2021-07-06 13:31:25

Cloudera数据管理数据分析
面试官：如何管控数据？
数据管控是在做大数据平台包括传统BI都需要做的工作，数据从各个数据源过来，我们都要进行数据质量的管理，也就是我们常说的数据治理。那么在数据仓库建设的时候如何进行数据管控呢？

2021-07-06 07:08:18

管控数据数仓
数据仓库有坑怎么办，如何从0到1来填坑
这种数据仓库体系，最典型的特征，是找数据只能给表，无法通过规范自主查找;看逻辑只能问人，无法通过模型设计快速了解;问业务只能靠求，别人管不过来自己的事情了，哪有时间来管你?

2021-07-05 22:32:33

数据仓库团队
“学思知行 走进榜样”之走进紫光集团完美收官
7月3日，由CIO百人会指导、CIO时代主办、新基建创新研究院作为智库支持的“学思知行 走进榜样”之走进紫光集团的游学活动，在北京紫光集团成功举办。

2021-07-05 15:22:07

紫光CIO
可以优化成本和性能的六种云计算数据管理技术
强大的云计算数据管理功能可以为企业带来更多优势。它在数据访问方面提供了更大的灵活性，让企业可以更快地扩展数据库，从长远来看，甚至可以降低数据管理的总拥有成本。

2021-07-05 11:07:41

云计算数据管理云应用
一文读懂大数据实时计算
现在大数据应用比较火爆的领域，比如推荐系统在实践之初受技术所限，可能要一分钟，一小时，甚至更久对用户进行推荐，这远远不能满足需要，我们需要更快的完成对数据的处理，而不是进行离线的批处理。

2021-07-05 10:48:42

大数据实时计算
上一页 1 ··· 3738394041 ··· 179
点赞

51CTO技术栈公众号

业务
速览
在线客服