直播训练营

鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

大数据

8799内容

关注

大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。

文章博文帖子课程

共 8799 条

“大数据杀熟”等乱象凸显，我们需要什么样的“算法”？

据不完全统计，当前基于算法的个性化内容推送已占整个互联网信息内容分发的70%左右。算法推荐逐渐成为各平台“基本操作”的同时，诸如低俗劣质信息精准推送、“大数据杀熟”等乱象也凸显出来。

2020-11-17 07:55:22

大数据杀熟

大数据时代，一次对个人信息保护的积极回应

个人信息保护法是我国立法对大数据时代个人信息、数据安全等问题所作的积极回应。该法通过后，将在数据安全领域具有基础性的法律地位，必将加快我国数据监管与保障法律体系的建设进程。

2020-11-16 16:38:35

信息安全大数据互联网

大数据风控：在安全与发展之间寻找平衡点

如今，不仅是手机号，人们的日常衣食住行，消费记录、信用记录、出行记录等，都被一些互联网企业记录并可能成为大数据风控的参考因素。有网友戏言，这是在互联网上“裸奔”的时代。然而，数据就在我们身边，而且每天都在产生，并对各行业发展产生影响。如何合法、合规采集并使用好数据这一生产要素，如何正视大数据风控的价值与弊端，值得各方关注。

2020-11-16 13:21:16

大数据助推智慧医疗发展，万亿蓝海下需要注意三点

在人工智能、物联网等新一代信息技术的加持下，信息化、智能化的智慧医疗加速崛起，医疗大数据价值也日益凸显。

2020-11-16 12:04:07

大数据智慧医疗技术

自学大数据，给IT新手的7个MongoDB实战项目

MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。

2020-11-16 09:16:23

大数据数据了 IT

人人都说“数据直觉”很重要，但它到底是个啥？又该如何培养？

上周，一位同事让我解释下“数据直觉”的含义，我突然发现虽然自己一直在强调数据直觉，却从来没有真正的定义过它。

2020-11-14 16:00:55

数据直觉数据分析大数据

2020年值得关注的4个大数据趋势

在过去的几年中，我们在Redpoint投资了超过15家数据公司，并部署了超过2.5亿美元的资本。我们是数据/机器学习基础设施和分析市场的长期信奉者，并没有放缓。

2020-11-14 15:55:45

大数据技术资本

大数据杀熟或认定为垄断，值得期待

2019年初的一项调查显示，包括在线旅游在内的一些网络平台是大数据杀熟问题的重灾区之一。

2020-11-13 10:41:44

大数据杀熟

5种令人惊讶的使用Jupyter的方式

Jupyter 不仅仅是一个数据分析工具，让我们看看如何以最有创意的方式使用这个基于 Python 的软件。

2020-11-13 06:18:07

Jupyter Python 数据分析

双十一你被大数据杀熟了吗？数据分析揭秘商家的杀熟套路

激动人的双十一狂欢购物节终于过去了，剩下的就是大家空荡荡的钱包和等待快递包裹的迫切心情了。

2020-11-12 16:17:48

大数据数据分析双十一

欧盟指控亚马逊滥用“大数据”

欧洲联盟10日宣布，经调查初步认定，美国互联网巨头亚马逊破坏欧洲主要市场的零售业公平竞争，涉嫌利用其规模、权力和“大数据”牟取对其平台第三方卖家的不正当竞争优势。

2020-11-12 09:49:29

大数据亚马逊互联网

通过数据虚拟化和容器化使数据库现代化，从而获得更高的 ROI

数据库需要比以往任何时候都支持更多的功能。它们必须在混合和多声音环境中适应来自各种来源的多种类型数据。

2020-11-11 17:47:10

Excel 执行SQL查询函数

之前给大家介绍过，利用Excel内置的SQL查询引擎，来执行查询操作。通过编写SQL查询语句，可以完成Excel内置函数不能够完成的工作。带好笔纸做笔记吧，下面通过几个案例，介绍SQL查询语句的基本用法，如果有类似的工作，只需要更改几个地方就可以了。

2020-11-11 14:36:57

Excel SQL 函数

14个大数据专业词汇，帮你更好的理解大数据

众所周知，大数据行业充斥着大量的专业词汇，很多人不一定都准确掌握和了解这些词汇的含义。本文整理了以数据处理为中心的14个大数据专业词汇，希望能有助于大家更好的理解大数据，更好地利用大数据

2020-11-11 10:12:32

Spark刷爆磁盘与Java弱引用的关系

今天，给大家分享下。Java的引用在大数据框架下的引用案例。

2020-11-11 08:55:32

Spark Java 磁盘

平台经济反垄断指南发布，大数据杀熟行为要被严格监管了！

11月10日，国家市场监管总局发布了《关于平台经济领域的反垄断指南（征求意见稿）》。围绕平台经济与大数据领域，一个有重大意义的指南出台了。

2020-11-11 07:32:41

如何搭建属于你的专业Python大数据分析环境

数据科学通常被描述为统计和编程的交集。在本文中,我们讲介绍如何在你的电脑上设置立专业数据科学环境,这样你就可以开始动手实践与流行的数据科学库!

2020-11-10 13:40:01

Python 数据科学环境

大数据发展风险管理的4种方式

在数字时代，大数据已彻底改变了业务和风险管理的格局。通过无限制地访问有关潜在客户和用户行为的信息，组织正在使用分析以前所未有的先进方式改进其风险管理实践。

2020-11-10 10:59:19

大数据大数据发展风险管理

拖后腿没？58同城双十一热门职位大数据：快递员平均月薪8519元

随着双十一的到来，一年一度的购物盛会拉开帷幕，许多企业都提前储备快递人才备战双十一。

2020-11-10 10:38:17

大数据双十一快递员

Graph+AI World 2020 中国峰会即将举办，TigerGraph掀起图改世界新浪潮

TigerGraph宣布，将在11月19日在线举办Graph+AI World 2020 中国峰会。本次峰会将是TigerGraph在9月份举办全球峰会之后，针对中国企业、合作伙伴、开发者以及社会大众专门定制的大会，旨在利用图算法加速人工智能和机器学习项目，洞察数据深度关联，探索图分析更多可能。

2020-11-09 13:19:19

TigerGraph AI 图数据库

熬了一夜！双十一来了，为了帮女友买手机！我分析了上千部手机！

都说码农不容易，白天写程序员，晚上熬夜加班，有的时候项目忙的连陪女友的时间都没有！我容易吗～～。

2020-11-09 10:25:32

数据分析双十一手机

在pandas中使用pipe()提升代码可读性

我们在利用pandas开展数据分析时，应尽量避免过于「碎片化」的组织代码，尤其是创建出过多不必要的「中间变量」。

2020-11-08 14:36:27

pandas 数据分析 pipe()

马云被约谈阿里大数据的羹怎么分给每一个人？

大数据和区块链的是两种截然不同的新兴技术，但是它们有着很大的可以结合的空间。区块链的本质是一种去中心化的分布式账本。它也可以理解为是一-种不可篡改的、全历史的、分布式数据库存储技术。

2020-11-06 18:12:19

大数据区块链蚂蚁金服

懂了数据结构框架思维，一切算法不过是纸老虎

数据结构的存储方式只有两种：数组(顺序存储)和链表(链式存储)。这句话怎么理解，不是还有散列表、栈、队列、堆、树、图等等各种数据结构吗?

2020-11-06 12:48:16

数据结构算法分析

警惕大数据“杀熟”之风抬头

大数据“杀熟”，是指同样的商品或服务，不同用户看到的价格或搜索到的结果不同，从而导致用户权益受损的现象。

2020-11-06 11:37:42

大数据技术电商

想做数据分析？先避开这4个新手常见的错误！

一般聊到如何做数据分析的文章，都会从各个视角去介绍数据分析的思路和流程。但今天这篇文章，不会告诉你怎么按1234的步骤做数据分析，而是告诉你在数据分析中，不要做什么。

2020-11-06 08:30:45

数据分析数据思维错误

数据中台到底包括什么内容？一文详解架构设计与组成

本文将介绍数据中台到底包括什么内容。企业建设数据中台的过程中哪些能力是必选项，哪些是可选的，将在本文一一揭晓。

2020-11-06 00:55:16

数据中台数据大数据

区分理解Flink水印延迟与窗口允许延迟的概念

本文接下将展开讨论分析“水印延迟”与“窗口允许延迟”概念及区别。

2020-11-06 00:52:33

Flink 水印延迟数据

电商大数据“杀熟”怎可屡禁不止？

近日，北京韩女士在某电商平台购物时，中途错用另一部手机结账，竟然意外发现同一商家的同一件商品价格不同。在她注册约12年、且经常使用、总计消费金额近26万元的一个高级会员账号上显示的价格，反而比仅注册5年、很少使用、总消费不过 2400多元的一个普通账号贵了25块钱。

2020-11-05 16:02:56

大数据电商技术

一个数据爬取和分析系统的演变过程

假设有这样一个需求，需要你写一个爬虫，爬取微博中关于某个话题的讨论，然后分析情感，最后用一个网页来展示分析结果。

2020-11-05 08:23:24

数据爬取数据分析爬虫

【鸿蒙开发板试用报告】HiSpark Wi-Fi IoT智能家居套件之云服务器篇

由于samba工具服务端口445继勒索病毒“永恒之蓝”被封，与WINDOWS远程共享文件受阻，但又想利用云服务器资源进行代码编译，经测试本方法稳定高效。

2020-11-04 13:20:14

数据资产？你并没有什么数据资产

数据垃圾还是数据资产，这是一个问题。数据绝对不都是资产，更多数据是垃圾。

2020-11-04 10:33:19

数据分析可以改善工作多样性吗?

人力资源分析平台Visier公司首席执行官Ryan Wong日前对数据分析为什么可以帮助组织领导者实现工作的多样性和包容性进行了分析和探讨。

2020-11-04 10:29:42

数据分析工作多样性大数据

大数据风控的挑战：团伙骗贷逾十亿线上信贷如何反欺诈？

作为一起新型贷款诈骗案件，相关监管部门和银行已关注到其中的欺诈风险，目前已有部分银行暂停省内个人线上信贷产品。

2020-11-04 09:41:07

大数据信贷技术

技术创新驱动永洪科技联合生态提速企业数字化转型原创

疫情期间，全球经济受挫，永洪科技也在积极应变，始终践行“以卓越的数据技术为客户创造价值，实现客户成功”的价值观，日益夯实着技术创新的根基，在技术创新能力、场景方案能力、生态体系建设能力以及面向全行业的数据分析师培养能力方面持续进阶，全方位驱动企业数字化升级。

2020-11-03 16:07:38

永洪科技数据分析 BI

IDC：华为云再次位居中国大数据管理平台领导者象限

近日,全球领先的IT研究和咨询公司国际数据公司(IDC)最新发布《IDC MarketScape: 中国大数据管理平台厂商评估,2020》报告,对中国主流大数据厂商从能力、市场、战略三个维度进行了全面评估。

2020-11-03 15:05:08

华为云大数据管理

数据分析对于防止投资失误至关重要

在数据分析的许多用途中，其中一个主要用途是防止投资错误。数据分析可以帮助组织发现新的投资模式和不良投资，同时在投资时需要自己如何解决一些问题。

2020-11-03 11:03:59

大数据数据分析工具

Hive数据倾斜案例讲解

实际搞过离线数据处理的同学都知道，Hive SQL 的各种优化方法都是和数据倾斜密切相关的，所以我会先来聊一聊 “「数据倾斜」” 的基本概念，然后再在此基础上为大家介绍各种场景下的 Hive 优化方案。

2020-11-03 10:16:24

Hive 数据倾斜 Hive SQL

职场大数据：女性程序员数量两年间增长70% 平均月薪达1.5万

女性一直是程序员职场的“稀缺物种”，不过情况正在发生变化。10月24日程序员节当天，腾讯课堂联合猎聘正式发布《中国女性程序员职场力大数据报告》（以下简称“报告”），报告显示程序员领域不再是男性的专属领地，2018至2020年三年间，女性程序员的增长比例将近70%。

2020-11-03 09:23:46

大数据程序员女性

Windows10系统下Hadoop和Hive开发环境搭建填坑指南

笔者目前需要搭建数据平台，发现了Windows系统下，Hadoop和Hive等组件的安装和运行存在大量的坑，而本着有坑必填的目标，笔者还是花了几个晚上的下班时候在多个互联网参考资料的帮助下完成了Windows10系统下Hadoop和Hive开发环境的搭建。这篇文章记录了整个搭建过程中的具体步骤、遇到的问题和对应的解决方案。

2020-11-03 08:36:08

数据骗子无处不在，教你拆穿所谓“万金油”

数据分析师、机器学习/人工智能工程师、统计学家，这样的头衔是不是听起来很高大上？但小心别被骗了！高薪诱惑之下，不少数据骗子也隐藏在其中，这些骗子毁了遵纪守法的数据专业人士的好名声。

2020-11-02 17:34:22

数据分析人工智能技术

盘点大数据处理引擎

提到大数据，我们就离不开数据的收集整理，其中ETL是我们经常使用的用于构建数据仓库，构建大数据的方法。

2020-11-02 15:56:04

大数据数据库技术

大数据在医疗、供应链和智慧城市中的作用

通过我们的数据货币化可以帮助加快世界应对未来流行病的反应，并使优秀的智慧城市成为现实吗？

2020-11-02 15:42:11

大数据智慧城市技术

用Python构建和可视化决策树

决策树的目标是将数据分成多个组，这样一个组中的每个元素都属于同一个类别。决策树也可以用来近似连续的目标变量。在这种情况下，树将进行拆分，使每个组的均方误差最小。

2020-11-02 13:54:41

Python 可视化决策树

每个数据科学家都需要的3种简单的异常检测算法

深入了解离群值检测以及如何在Python中实现3个简单，直观且功能强大的离群值检测算法。我确定您遇到以下几种情况：您的模型表现不理想；您不禁会注意到有些地方似乎与其他地方有很大的不同。恭喜，因为您的数据中可能包含异常值!

2020-11-02 13:44:35

算法数据科学 Python

9.04亿网民真实数据曝光，超7成月收入竟不到这个数？你是哪类？

人口普查是一个关系全民的大事，十年一次的全国人口普查将于11月1日正式开启。我国人口已突破14亿，随着移动互联网的发展，我国网民已破9亿，而这里有一个扎心的数据，七成网民月收入不足5000元。

2020-11-02 10:06:29

数据分析网民收入

Hive 如何快速拉取大批量数据

用hive来做数仓类操作，或者大数据的运算，是没有疑问的，至少在你没有更多选择之前。当我们要hive来做类似于大批量数据的select时，也许问题就会发生了变化。

2020-11-02 09:53:13

Hive 数据算法

多快好省地使用pandas分析大型数据集

本文就将以真实数据集和运存16G的普通笔记本电脑为例，演示如何运用一系列策略实现多快好省地用pandas分析大型数据集。

2020-11-01 16:53:31

pandas 数据分析数据集

如何选择数据分析可视化工具？Excel, Tableau还是Power BI？

正确分析使用数据可能会挖到宝藏。那么，作为个人或公司，如何选择分析和可视化数据的工具？在本文中，我们从各个方面比较三个工具的功能。

2020-11-01 16:49:51

数据分析可视化工具数据

每个数据科学家都必须了解的5大统计概念

以下是每个数据科学家都应该知道的前五个统计概念：描述性统计，概率分布，降维，过采样和欠采样以及贝叶斯统计。

2020-10-31 22:04:39

统计和数据科学数据科学家

上一页 1 ··· 52 53 54 55 56 ··· 176 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区

教育

51CTO学堂精培企业培训 CTO训练营