51CTO首页
AI.x社区
博客
学堂
精品班
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

大数据

8917内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8917 条
预计2022年突破万亿元 大数据产业增长迅猛
有专家指出，大数据时代的到来，使得数据有了新的历史使命，数字资源的资产性质和生产要素角色日益凸显，应加快构建系统化数据治理体系，从而避免数据治理的碎片化。

2020-09-01 10:18:31

大数据大数据政策数据治理
Pandas这样来设置，做数据分析舒适百倍
Pandas有着自己的一套「参数设置系统」，可以帮助我们在遇到不同的数据时灵活调节从而达到最好的效果，本文就将介绍pandas中常用的参数设置方面的知识。

2020-08-30 14:29:01

Pandas数据分析函数
借助正确的云数据管理解决方案，让您的数据更易于访问并产生价值
为了帮助克服这一挑战，企业在向数据管理基础结构添加新的云解决方案时应牢记几个注意事项。

2020-08-28 22:12:10

人工智能IBMAI
亮点抢先看，华为云TechWave大数据专题日有啥料?
8月31日，华为云TechWave大数据专题日与您相邀线上。

2020-08-28 15:54:47

华为云TechWave大数据
面试必备：数据科学家必须掌握的3个统计学概念
从某些角度上来讲，如今的数据科学家基本上等于现代统计学家。在数据科学面试中，我们也少不了要面对统计学相关的知识。

2020-08-28 13:49:13

数据统计学面试
大数据的七大核心具体价值
近期有不少文章畅谈大数据的价值，以及其价值主要凸显在哪些方面，这里我们对大数据的核心具体价值进行了分门别类的梳理汇总，希望能帮助读者更好的获悉大数据的大价值。

2020-08-27 11:05:08

大数据互联网数字
每个大数据架构师都需要的6个基本技能
为了成为一名出色的大数据架构师，首先必须成为一名数据架构师，但这两种角色的职责各有不同。

2020-08-26 10:55:31

大数据架构师大数据数据分析
爱奇艺数据中台建设组合拳：日志投递、统一数仓、大数据平台
说到数据中台的产生，我们不得不从数据工作的痛点来切入。我总结了八个方向，这八个方向可能不足以覆盖数据工作中的所有痛点，但肯定是数据工作中最痛的八个点。

2020-08-26 10:17:55

爱奇节数据中台数据平台
数据之美：可视化会给你意想不到的答案！
Phodal 作为数据科学家或分析师、人工智能或机器学习工程师，我们大部分的工作都是向同事或主管解释事物，报告个人的工作和发现，数据可视化已经成为我们生活中必不可少的一部分。 而对于不了解或不感兴趣的人来说，原始数据就是长串随机数字、图像或音频文件。我们的工作是让这些人理解数据，并引导他们从这些数据中作出有用的推论。 罗伯特·科萨拉说：“数据可视化是挖掘和利用数据的关键。即便是最简单的可视化，也能够消除数据提供者对自己的数据被低估、误解或歪曲的忧虑。数据可视化能够改变人们对数据的理解方式，提高大众

2020-08-25 13:22:07

数据可视化
利用大数据和市场力量解决气候变化难题
澳大利亚气候科学家Steven Sherwood及他的来自世界各地的团队成员上个月发表了一篇学术论文，读起来发人深省。

2020-08-24 15:46:02

大数据气候数字原料
Hadoop如何进行大数据处理？工具，优劣势，用例和应用场景
Apache Hadoop可以轻松处理大型数据集。那么到底什么是Hadoop?其主要组件是什么?以及Apache Hadoop是如何帮助处理大数据的?

2020-08-24 15:36:26

Hadoop大数据数据
解构+优化：数据分析的五大发展趋势
数据分析的重要性越来越凸显出来，本文列出的五大趋势为企业或组织点明了一些发展方向，可以增加盈利、提高客户忠诚度、减少资源浪费和避免效率低下。

2020-08-24 15:32:01

数据分析解构优化
Teradata Vantage重新定义数据分析的“现代化”
正是因为Teradata Vantage平台既有传统数据仓库领导厂商的专业度，又有云端部署的灵活度，越来越多的客户选择使用Teradata。

2020-08-24 11:56:27

Teradata大数据 Vantage
人们需要了解的智能电网大数据分析
人们需要了解有关智能电网大数据分析的更多信息，以及它将如何影响人们的生活。

2020-08-24 10:54:47

智能电网大数据数据分析
探索数据治理之路，激发数据无限活力
在大数据时代，数据已成为企业和社会关注的重要战略资源，对于海量、高速增长的数据资产，需要用新的治理模式才能激发数据活力、提升数据资产价值。本文旨在研究如何有效开展数据治理实践工作，解决数据治理项目落地问题。

2020-08-24 09:27:42

大数据IT技术
数据科学家含金量最高的5个数据科学认证，先马后看！
尽管关于这个话题的文章不计其数，但文本作者想要找寻那种为大部分数据科学家所用而又有特色的工具及其认证。这些认证有的是免费的，有的比较便宜，但都值得尝试。

2020-08-23 12:26:59

数据科学家数据科学认证数据科学
比较商业智能与商业分析
商业分析和商业智能非常相似，很多业内专家都容易混淆，但了解这两者的应用和最佳做法至关重要，以从数据中获得最佳见解。

2020-08-23 12:02:59

商业智能商业分析数据
R语言作图：如何在数据可视化过程中调整因子顺序
今天的内容依然是来自《R for datascience》，目前已经看到了15.4了，每次遇到比较有意思的我自己不会的操作就会在这儿写下来，所以，如果你对我写的东西感兴趣的话，建议你去看原版书籍，顺便关注我一波。嘿嘿。

2020-08-21 14:09:46

可视化数据集R语言
打散算法的三种解决方案及其选型场景
打散是在推荐、广告、搜索系统的结果基础上，提升用户视觉体验的一种处理。主要方法是对结果进行一个呈现顺序上的重排序，令相似品类的对象分散开，避免用户疲劳。算法端传出的推荐结果，往往具有以下几个痛点。

2020-08-20 20:51:17

打散算法打散法原算法
大数据分析为什么学习R中的假设检验
大数据分析为什么学习R中的假设检验? 假设检验能够确定统计意义是大数据分析中最重要的技能之一。例如，如果您观察到数据中的趋势，那么该趋势是否具有统计意义，或者数据中只是一些随机噪声?

2020-08-20 20:33:57

大数据R假设检验
2020大数据十大关键词
为加快培育数据要素市场，进一步支撑国家大数据战略落地，推动“十四五”期间大数据产业交流与合作，2020大数据产业峰会·成果发布会于线上召开。本次大会由中国信息通信研究院、中国通信标准化协会大数据技术标准推进委员会主办。会上，中国信通院云大所所长何宝宏发布了《2020大数据十大关键词》。

2020-08-20 10:44:50

大数据通信院关键词
大数据技术与服务市场中 金融、通信等应用主宰“沉浮”
当前，大数据已经成为国家基础性战略资源和无形资产，世界各国对大数据战略的重视程度不断提高，加快大数据技术攻关、服务优化、业态创新势在必行。

2020-08-20 09:22:50

大数据金融技术
还在用Excel+ppt做数据分析报告？用这个方法更快、更简单
无论是专业的数据分析师还是销售、人力等基本的业务岗位，在汇报时总是免不了要用到各种各样的数据分析，为了让数据展现更加直观，基本上利用数据图表将数据可视化，然后再配合文字的解读，让报告看起来更直观。

2020-08-20 09:17:02

数据分析技术IT
什么是误差图？今天带你了解可视化误差图，让数据一目了然
这是Python数据可视化的系列短篇，针对初级和中级用户，将理论和示例代码相结合，使用matplotlib, seaborn, plotly等工具创建不同主题的图表。

2020-08-19 17:31:03

误差科学测量可视化
ClickHouse留存分析工具十亿数据秒级查询方案
本文实践了对于千万级别的用户，操作总数达万级别，每日几十亿操作流水的留存分析工具秒级别查询的数据构建方案。同时，除了留存分析，对于用户群分析，事件分析等也可以尝试用此方案来解决。

2020-08-19 12:29:35

留存分析数据工具
数据行业的高级岗位和初级岗位，到底有什么区别？
最近搜罗了一些粉丝问的问题，一些比较好的问题拿出来和大家一起探讨，今天的问题是就数据分析的岗位级别区分来探讨一下，帮助大家在数据分析的岗位晋升中可以有的放矢。

2020-08-19 08:10:11

数据分析技术IT
中国大数据市场规模将在2020年达到104.2亿美元
根据最新发布的《IDC全球大数据支出指南》（Worldwide Big Data and Analytics Spending Guide, 2020V2）中IDC预测，2020年，全球大数据相关硬件、软件、服务市场的整体收益将达到1,878.4亿美元，较2019年同比增长3.1%

2020-08-19 08:04:17

大数据IT技术
自然语言处理在如何改变数据分析界 译文
随着NLP变得更普遍，它将使人们能够以前所未有的方式与计算机进行交互。这种新型协作将改善广泛的人类活动，包括商业、慈善、健康和沟通。

2020-08-19 07:00:00

数据分析技术语言处理
从数据库到可视化性能，5个大数据分析工具测评，python只排倒数
大数据时代，大数据分析行业水涨船高，很多身边的朋友都想学习一下如何进行大数据分析。经常有人问我该怎么选择大数据分析工具。也对，面对市面上那么多大数据分析工具，大家在选择的时候都会懵一下。为了解答大家的疑惑，今天我测评了5款较为常用的大数据分析工具。

2020-08-18 17:35:30

数据分析分析工具可视化
爬取上市公司数据、分析数据，并用可视化现实全国各地区公司数量
在很多网站上，都会以表格的形式展示数据，而我们获取这种数据只需通过十几行爬虫代码就可以搞定，轻松搞定网页爬虫，实现高效办公。

2020-08-18 17:26:46

数据爬虫代码
如何选择云计算机器学习平台
云计算机器学习平台提供的多种功能可以支持完整的机器学习生命周期。

2020-08-18 10:39:45

机器学习大数据云计算
如何创建数据架构以推动创新
昔日的数据架构已经无法满足当今对速度、灵活性和创新的需求。成功升级的关键(也是巨大的潜在回报)是敏捷性。

2020-08-18 10:04:49

大数据数据架构技术
未来10年，企业想要生存：就要做好数字化转型
什么是数字化转型?简单来理解，就是把现实世界转向互联网为主体的虚拟世界，把生产、设计、研发、运营、商品、客户、经营流程、管理等，通过互联网连接、通过云计算、大数据，变成可以度量的数字和数据。

2020-08-17 17:59:20

大数据数字化转型技术
大数据如何助力企业的数字化转型
“大数据”一词最早出现于15年前，顾名思议，大数据是日益增长的、多样化的、复杂的、数量庞大的数据，这些数据难以通过传统的数据管理实践进行管理。近年来，随着数字化转型的兴起，大数据已成为组织数字化转型旅程的主要推动力。

2020-08-17 14:50:48

大数据数字化转型
Python数据分析Numpy库常用函数详解，提到循环就该想到的库
本文整理了该库的一些常用函数和基础知识，整理不易，希望觉得还不错的朋友可以不吝给个赞。

2020-08-17 13:04:06

PythonNumpy数据分析
耗时3天，上亿数据如何做到秒级查询？
最近在忙着优化集团公司的一个报表。优化完成后，报表查询速度由从半小时以上(甚至查不出)到秒查的质变。

2020-08-17 08:21:31

数据查询项目
终于有人把AI、BI、大数据、数据科学讲明白了
本文概述数据、分析、商业智能、报表、大数据、数据科学、边缘分析、信息学以及人工智能和认知计算这些基本概念。

2020-08-17 08:17:00

大数据人工智能技术
说说做数据分析遇到的那些坑，给大家提个醒
这一期我的数据分析交流群讨论一个话题，关于从事数据分析岗位，你踩过哪些坑，小伙伴们都踊跃参与的讨论，也让我学到很多经验，借此整理了一些大家回答中的干货，希望能够帮助大家，在数据分析的道路上，少走弯路。

2020-08-17 07:55:45

数据分析技术IT
Python数据分析实战，小费数据集应用
本节选用的是Python的第三方库seaborn自带的数据集，该小费数据集为餐饮行业收集的数据，其中total_bill为消费总金额、tip为小费金额、sex为顾客性别、smoker为顾客是否吸烟、day为消费的星期、time为聚餐的时间段、size为聚餐人数。

2020-08-16 12:44:59

小费数据集Python数据分析
使用Pandas分块处理大文件
今天在处理快手的用户数据时，遇到了一个差不多600M的txt文本，用sublime打开都蹦了，我用pandas.read_table()去读，差不多花了近2分钟，最后打开发现差不多3千万行数据。这仅仅是打开，如果要处理不知得多费劲。

2020-08-14 11:01:32

数据Pandas文件
在数据统计分析面前，R语言是“王者”，Python只能当“小弟”
如果一个人想快速进行有效的统计分析，就应该寻求一个直观的统计环境来计算数据。而 R 在数据的统计分析中占主导地位。下面是我对 R 如何优于 Python 的经验。

2020-08-14 10:58:27

R语言Python统计分析
5个可以帮助Pandas进行数据预处理的可视化图表
在本文中，我将讨论五个强大的数据可视化选项，它们可以立即提供数据特征的感觉。即使在正式建模或假设测试任务之前，执行EDA就可以传达大量关于数据和特征之间关系的信息。

2020-08-14 10:45:26

Pandas可视化数据预处理
大数据：数字化转型的核心驱动力
大数据最核心的价值在于照亮企业中种种以往难以窥见的角落，让管理者、决策者可以做到心中有数。

2020-08-14 08:32:56

大数据IT技术
Spark优化之小文件是否需要合并?
我们知道，大部分Spark计算都是在内存中完成的，所以Spark的瓶颈一般来自于集群(standalone, yarn, mesos, k8s)的资源紧张，CPU，网络带宽，内存。Spark的性能，想要它快，就得充分利用好系统资源，尤其是内存和CPU。

2020-08-13 14:58:06

Spark小文件存储
100%让你在10分钟内学会如何用Python将数据批量的插入到数据库
本文基于python, 使用pandas, pymysql等三方库实现了向数据库中高效批量插入数据，一方面提供被网上很多瞎转载的答案给坑蒙了的人(因为我也是)，一方面自己也做个笔记，以后方便查阅

2020-08-13 13:51:22

Python数据库插入数据
数据量太大？散点图装不下怎么办？用Python解决数据密度过大难题
当我们需要观察比较2个变量间的关系时，散点图是我们首选图表。可当数据量非常大，数据点又比较集中在某个区间中，图表没法看，密密麻麻的怎么看?

2020-08-13 13:41:31

Python数据密度散点图
Excel插入批量图片，套用这些代码就OK
咱们今天分享的内容是按指定名称和位置批量将图片插入到Excel工作表中……

2020-08-13 13:38:04

Excel代码数据
2020年大数据给企业带来的5大好处
大数据是帮助企业开展业务的一个很好的技术，并将为企业带来了更多好处。

2020-08-12 11:29:16

大数据大数据应用数据
数据管理成功的最重要举措
当组织处理大型复杂的项目时，自然会出现数据管理方面的挑战。组织战略计划、执行模型、项目组合、预算及其所有辅助数据，可以为组织建立效率，数据完整性和最终对决策的信心打下坚实的基础。

2020-08-12 10:56:55

数据管理数据数据分析
想成为数据可视化高手，先来看完这篇极速入门教程
说起数据分析的必备技能，就不得不提一个很火的词语，那就是数据可视化，究竟什么是可视化？怎么才能学会数据可视化呢？

2020-08-12 09:48:24

大数据数据可视化技术
上一页 1 ··· 5960616263 ··· 179
点赞

51CTO技术栈公众号

业务
速览
在线客服