什么是大数据?要从这三个层面来理解

547 篇文章 29 订阅
订阅专栏
7 篇文章 1 订阅
订阅专栏
3 篇文章 0 订阅
订阅专栏

本篇内容较长,心急的小伙伴可以先看目录,直接定位到感兴趣的部分:

  • 为啥都在说“大数据”,却很难解释清楚到底啥是“大数据”?
  • 理论层面上的大数据
  • 价值层面上的大数据
  • 技术层面上的大数据


01 为啥都在说“大数据”,却很难解释清楚到底啥是“大数据”?

“大数据”三个字已经被喊烂了,“大数据分析”也经常被人提起。但如果真正问起来“大数据是什么?”却往往不知道如何解释。

这其实很正常,究其原因,

  • 一是因为大家对大数据这类新技术有着相同的原始渴求,至少知其然在聊天时不会显得很“土鳖”;
  • 二是在工作和生活环境中真正能参与实践大数据的案例实在太少了,所以大家没有必要花时间去知其所以然。

这就导致了虽然大家都在说“大数据”,可真正理解“大数据”是啥的却少之又少!

这篇我想尽量尝试用简洁易懂的话语和案例,来为大家解释“到底什么是大数据?”


02 理论层面上的大数据

最早提出大数据时代到来的是麦肯锡——

“数据已经渗透到当今每一个行业和业务职能领域,成为重要的生产因素。人们对于海量数据的挖掘和运用,预示着新一波生产率增长和消费者盈余浪潮的到来。”

业界(IBM 最早定义)将大数据的特征归纳为4个“V”——

量Volume:数据体量大。大数据的起始计量单位至少是P(1000个T)、E(100万个T)或Z(10亿个T)
多样Variety:数据类型繁多。比如网络日志、视频、图片、地理位置信息等等。
价值Value:价值密度低,商业价值高。
速Velocity:处理速度快。和传统的数据挖掘技术有着本质的不同。

阿里巴巴的王坚对于大数据也有一些独特的见解,比如——

今天的数据不是大,真正有意思的是数据变得在线了,这个恰恰是互联网的特点。
非互联网时期的产品,功能一定是它的价值,今天互联网的产品,数据一定是它的价值。
你千万不要想着拿数据去改进一个业务,这不是大数据。你一定是去做了一件以前做不了的事情。

最后一点我非常认同的,大数据的真正价值在于创造,在于填补无数个还未实现过的空白。


03 价值层面上的大数据

大数据的真正价值不在于拥有多少数据,而在于如何使用它,我举一个非常有趣的例子:

1948年辽沈战役期间,司令员林彪要求每天要进行例常的“每日军情汇报”,由值班参谋读出下属各个纵队、师、团用电台报告的当日战况和缴获情况。

那几乎是重复着千篇一律枯燥无味的数据:

  • 每支部队歼敌多少、俘虏多少
  • 缴获的火炮、车辆多少,枪支、物资多少
  • ……

有一天,参谋照例汇报当日的战况,林彪突然打断他:“刚才念的在胡家窝棚那个战斗的缴获,你们听到了吗?”

大家都很茫然,因为如此战斗每天都有几十起,不都是差不多一模一样的枯燥数字吗?

林彪扫视一周,见无人回答,便接连问了三句:

“为什么那里缴获的短枪与长枪的比例比其它战斗略高?”
“为什么那里缴获和击毁的小车与大车的比例比其它战斗略高?”
“为什么在那里俘虏和击毙的军官与士兵的比例比其它战斗略高?”

林彪司令员大步走向挂满军用地图的墙壁,指着地图上的那个点说:

“我猜想,不,我断定!敌人的指挥所就在这里!”

果然,部队很快就抓住了敌方的指挥官廖耀湘,并取得这场重要战役的胜利。

这些例子真实的反映在各行各业,探求数据价值取决于把握数据的人,关键是人的数据思维;与其说是大数据创造了价值,不如说是大数据思维触发了新的价值增长,比如:

  • 近乎实时地确定故障、问题和痛点的根本原因。
  • 比人眼更快、更准确地发现异常。
  • 通过快速将图表数据转化为洞察力来制定解决方案。
  • 在几分钟内重新计算整个风险组合。
  • 提高深度学习模型准确分类和应对不断变化的变量的能力。
  • 提前预判风险、提前准备风险方案。
  • ......

04 技术层面上的大数据

大数据常和云计算联系到一起,云计算思想的起源是麦卡锡在上世纪60年代提出的:

把计算能力作为一种像水和电一样的公用事业提供给用户。

(1)业内是这么形容两者的关系:

  • 没有大数据的信息积淀,则云计算的计算能力再强大,也难以找到用武之地;
  • 没有云计算的处理能力,则大数据的信息积淀再丰富,也终究只是镜花水月。

(2)云计算和大数据之间的联系:

  • 可以提供更多基于海量业务数据的创新型服务;
  • 通过云计算技术的不断发展降低大数据业务的创新成本。

(3)云计算和大数据之间的区别

  • 概念不同:计算改变了IT,大数据改变了业务。然而大数据必须有云作为基础架构,才能得以顺畅运营。
  • 目标受众不同:云计算是CIO等关心的技术层,是一个进阶的IT解决方案。而大数据是CEO关注的、是业务层的产品,大数据的决策者是业务层。

(4)SaaS、PaaS、IaaS之间的区别

最后给大家补充阅读下,SaaS、PaaS、IaaS之间的区别是什么。

通俗解释: IaaS,PaaS和SaaS的区别

以上。

数据分析的三层需求
hualalalalali的博客
05-16 1505
文 | 王佳东fr 本文出自:知乎专栏《撩撩数据吧》——关于数据分析 为什么有的报表好用,有的报表不好用,有的企业会做一堆乱七八糟的报表,最近经常会思考这些问题。 有人说数据分析,为了开源节流,这个没有错,今天我从另外一个角度解读。数据分析,是为了应对风险(说明:风险与机会是一起的。PMI中将其共同列为风险管理,本文所有风险与机会同义),开源节流的每一次操作每一个节点,也是风险。
大数据分析三个阶段是什么
中琛魔方大数据
05-08 3726
  大数据是现代做人耳熟能详的热门话题了,甚至街边玩耍的小孩也能说上几句大数据的词语。但是,自从大数据逐步进入中国,然后开始慢慢热起来火起来,你知道大数据有哪几个阶段吗?   数据分析至少存在三个阶段:   阶段1:熟悉计算工具   第一个阶段是熟悉计算工具阶段,也就是能从数据中正确计算出结论。这一阶段需要的是编程能力和基础的逻辑分析。在这个阶段,需要打好基本的编程和数理基...
大数据相关的三个层面
lz0426001的专栏
11-05 2581
第一,把大数据作为一种对象,其对传统数据安全提出了新的挑战。以往我们的数据安全解决方案比如DLP,对象是局部的、受限的、确定的,而大数据时代,也许那些原本毫不起眼甚至毫无价值的数据,因其积聚而量变到质变,成为必要的保护对象。有挑战就有机遇,谁能更好地为大数据安全保驾护航,谁也许就掌握了未来的一项必杀技。 第二,比大数据作为对象更高一层的,是利用大数据来做安全。前文提到过,像IDS、SOC
什么是数据分层,数据分层的作用!
最新发布
2401_87019264的博客
09-08 879
数据体系中的各个表的依赖就像是电线的流向一样,我们都希望它是很规整,便于管理的。但是,最终的结果大多是第一幅图,而非第二幅图。
大数据的3V和三个层面
weixin_34010949的博客
10-31 1406
张亚勤表示,大数据具有高容量、高速度、多类型等“3V”的特点,应用大数据发挥价值包括数据的管理、数据的扩充、数据的呈现三个层面大数据的3V   张亚勤表示,讲到大数据3个V,一个是Volume,数据容量越来越大,第二个是 Velocity,数据量增长越来越快,需要处理的速度和响应的时间越来越快,对系统的延时要求相当高。第三个就是各种各样类型的数据,过去的数据更多的是结构化的,现...
大数据分析 - 三层神经网络
weixin_42281203的博客
05-25 537
实验题目:三层神经网络 单一处理代码: import sys,os sys.path.append(os.pardir) import numpy as np import time import pickle from dataset.mnist import load_mnist def sigmoid(x): return 1 / (1 + np.exp(-x)) def softmax(a): c = np.max(a) exp_a = np.exp(a - c) # 溢出对策 sum_
什么是大数据大数据学习路线和就业方向
weixin_45732629的博客
10-19 284
大数据又称巨量资料,就是数据量大、来源广、种类繁多(日志、视频、音频),大到PB级别,现阶段的框架就是为了解决PB级别的数据。 专业的来讲:大数据(big data,mega data),或称巨量资料,指的是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。 大数据的5V特点:Volume(大量)、Velocity(高速)、Variety(多样)、Va...
大数据究竟是什么?
05-14
一、理论层面理解大数据 1. 特征定义:大数据的核心特征通常概括为4V:Volume(量)、Variety(多样性)、Value(价值)和Velocity(速度)。这表示大数据不仅具有海量的数据规模,还涵盖了各种不同类型的数据源,...
什么是大数据系统存储及管理?
weixin_51689029的博客
09-14 2728
什么是大数据系统存储及管理?根据数据存储和管理的内容范围,大数据存储及管理技术需要重点研究如何解决大数据的可存储、可表示、可处理、可靠性及有效传输等。需要解决:海量文件的存储与管理,海量小文件的传输、索引和管理,海量大文件的分块与存储,系统可扩展性与可靠性的问题。对于任何一个企业来说,任何类型的数据都可能是至关重要且私有的,只有能在自己掌控的范围内才可以说是安全的。然而,很多行业巨头容易成为黑客攻击的首要目标,许多公司会对此有危机感。
大数据分析原理与实践》一一1.3 什么是大数据分析
weixin_33894640的博客
07-03 224
本节书摘来自华章计算机《大数据分析原理与实践》一书中的第1章,第1.3节,作者:王宏志 更多章节内容可以访问云栖社区“华章计算机”公众号查看。 1.3 什么是大数据分析 1.大数据分析的定义数据分析指的是用适当的统计分析方法对收集来的大量数据进行分析,提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。数据分析可以分为三个层次,即描述分析、预测分...
大数据学习笔记之五 数据中心的三层结构
xuqiaobo的博客
12-28 4726
传统的数据中心主要 依据功能进行区域划分,例如:Web、App、DB、办公区、业务区、内联区、外联区等。不同区域通过网关和安全设备互访,保证不同区域的可靠性、安全性。同时,不同区域由于具有不同功能,因此需要相互访问数据时,只要中断之间能够通信即可,并不一定要求通信双方处于同一个VLAN或二层网络。 传统的数据中心网络技术,STP是二层网络中非常重要的协议。用户构建网络的时,为了保证可靠性,通常会
数据仓库分层设计
a_hui_tai_lang的博客
07-31 8768
文章参考http://ierda.blog.163.com/blog/static/77469587201326105956470/,https://blog.csdn.net/kwu_ganymede/article/details/51367422 为什么要对数据仓库分层: a)用空间换时间,通过大量的预处理来提升应用系统的用户体验(效率),因此数据仓库会存在大量冗余的数据; b)如果不...
大数据-数据仓库分层概念
weixin_42326851的博客
06-04 3220
大数据-数据仓库分层概念
大数据应用的三个阶段,值得一看!!
crhacq798的博客
01-10 4749
从庞杂的数据背后挖掘、分析用户的行为习惯和喜好,找出更符合用户「口味」的产品和服务,并结合用户需求有针对性地调整和优化自身,就是大数据的价值。   对于大数据在商业上的用途,这句话说得很清楚。前半句是重点,了解用户的行为习惯和爱好,这就是大数据的核心价值。   1、元数据(Metadata)的概念   简单说,元数据是对数据本身进行描述的数据,或者说,它不是对象本身,它只描述对象的属性...
大数据的价值可以体现在哪些方面?
NicolasLearner的博客
04-08 3936
大数据的价值,从业务角度出发,主要有如下的3点: a.数据辅助决策:为企业提供基础的数据统计报表分析服务。分析师能够轻易获取数据产出分析报告指导产品和运营,产品经理能够通过统计数据完善产品功能和改善用户体验,运营人员可以通过数据发现运营问题并确定运营的策略和方向,管理层可以通过数据掌握公司业务运营状况,从而进行一些战略决策; b.数据驱动业务:通过数据产品、数据挖掘模型实现企业产品和运营的智能化,从而极大的提高企业的整体效能产出。最常见的应用领域有基于个性化推荐技术的精准营销服务、广告服务、基于模型算法
数据仓库
qq_44949002的博客
11-21 999
答:并行的,dw 层问:那其实对于同一个数据,这两个过程是串行的?ODS 全称是 Operational Data Store,操作数据存储.“面向主题的”,数据运营层,也叫ODS层,是最接近数据源中数据的一层,数据源中的数据,经过抽取、洗净、传输,也就说传说中的 ETL 之后,装入本层。概念:是数据仓库的细节数据层,是对STAGE层数据进行沉淀,减少了抽取的复杂性,同时ODS/DWD的信息模型组织主要遵循企业业务事务处理的形式,将各个专业数据进行集中,明细层跟stage层的粒度一致,属于分析的公共资源。
什么是大数据?带你认识大数据
v_wbf5027的博客
05-14 850
大数据是什么? 首先提一个问题:“大数据"是一项专门的技术吗?有的人可能会以为大数据是一项专门的技术,其实不是。“大数据"这三个字只是一门市场语言(Marketing Language),其背后是硬件、数据库、操作系统、I-ladoop等一系列技术的综合应用。    大数据简史 大数据(Big Data)现在可以说是人尽皆知,其实真正回溯起来,其是由SGI的首席科学家 JohnR.Masey于1998年在USENIX大会上首次提出的。他在其发表的一篇名为 Big Data and the Next Wave
Hadoop-1-大数据概述
一只不资深程序猿的博客
10-25 3391
在学习Hadoop之前,我们先来学习一下大数据的有关知识吧~ 1.1 大数据时代 1.1.1 三次信息化浪潮 次序 时间 标志 解决问题 代表企业 大数据 第一次信息化浪潮 1980年前后 个人计算机 信息处理 Intel,AMD,IBM,苹果,微软,联想,戴尔,惠普等 兴起 第二次信息化浪潮 1995年前后 互联网 信息传输 雅虎,Google,Alibaba,百度,腾讯 普及 第三次信息化浪潮 2010年前后 物联网、云计算大数据 信息爆炸 亚马逊、Google、IBM、VMW
大数据基本概述
Txixi的博客
08-13 1445
大数据概述
写文章

热门文章

  • Excel中万能的查询函数——VLOOKUP(使用方法+实操) 232742
  • 用大白话解释“什么是ERP?” 看完这篇就全明白了 115807
  • 编程入门指南:零基础如何自学编程? 62333
  • 2021盘点:国内外10大低代码开发平台 57625
  • 如何合并多个工作表或多个工作簿?3种合并方法都在这 54708

分类专栏

  • 企业管理 413篇
  • ERP 84篇
  • 低代码 547篇
  • CRM 134篇
  • OA 24篇
  • 进销存 68篇
  • 数字化转型 83篇
  • 项目管理 43篇
  • 数字化 36篇
  • SRM 17篇
  • WMS系统 2篇
  • 数据分析 90篇
  • 办公技巧 81篇
  • 供应商管理 5篇
  • 网站推荐 4篇
  • 团队管理 6篇
  • 数据可视化 58篇
  • 设备管理 25篇
  • IT 11篇
  • 职场 3篇
  • 云计算 7篇
  • 程序员博客 4篇
  • 大数据 3篇
  • 学习 3篇
  • 分析方法 15篇
  • 财务 4篇
  • 客户关系 3篇
  • 销售 3篇
  • 知识管理 2篇
  • 软件 14篇
  • 用户运营 1篇
  • Excel 9篇
  • 书籍推荐 3篇
  • 分析模型 1篇
  • 人力资源 11篇
  • 人事软件 9篇
  • 软件盘点 110篇

最新评论

  • Excel中万能的查询函数——VLOOKUP(使用方法+实操)

    风摇: 每次用都来看一遍你

  • 不会数据分析?无从下手?!保姆级攻略手把手带你入门

    Greyxxi224: 领书,有吗有吗

  • 一文学会如何做电商数据分析(附运营分析指标框架)

    李饭团是一只猪咪: 大佬有没有思维导图文件,照片好难搞

  • Excel中万能的查询函数——VLOOKUP(使用方法+实操)

    Abro.: thanks!!表情包

  • 什么是零代码?零代码与低代码有什么联系与区别?

    前端零代码: 零代码与低代码在简化开发流程、‌提高开发效率方面具有共同目标,‌但在技术实现、‌使用自由度和适用场景上存在差异‌。 推荐一款新开源的这个uiotos工具,页面嵌套、逻辑连线,做界面是在太简单了。 文档地址:https://www.yuque.com/liuhuo-nc809/uiotos?# 《UIOTOS 帮助手册》。

大家在看

  • 《Information Science》The Logic Of The Menu Bar
  • 《Information Science》Think more Less Can Do What In Course Ware
  • 《Information Science》C2 Can Do It Easily

最新文章

  • 什么是CRM销售漏斗?如何用CRM从0-1构建销售漏斗?
  • 2024最新盘点:国内外知名的人力资源系统厂商有哪些?
  • CRM中的RFM是什么?如何快速搭建运用RFM模型?
2024
10月 19篇
09月 43篇
08月 51篇
07月 31篇
06月 30篇
05月 29篇
04月 24篇
03月 21篇
02月 18篇
01月 39篇
2023年383篇
2022年147篇
2021年25篇
2019年4篇

目录

目录

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值

深圳坪山网站建设公司南安网站推广优化电商网站seo优化如何做网站优化与关键词濮阳网站优化哪里好怎样优化单页面网站网站百度搜索优化教程企业网站的优化汕头网站优化推广运营平顶山百度网站优化推荐四川品牌网站建设优化重庆市网站优化公司怎么样网站建设优化优选小钢炮湖北外包网站优化怎么做如何完成网站站点结构优化拉萨优质网站优化源山缘网站banner优化郑州网站优化如何收费怎么样优化网站seo盐城大丰网站优化兰州网站建设优化推广博罗专注网站优化优化数据分析网站当阳网站优化推广深圳分类网站优化最好的方法保山网站优化网站的营销优化有哪些福州市网站优化必看广西优化网站太原网站推广seo优化腾讯搜索引擎优化网站排名香港通过《维护国家安全条例》两大学生合买彩票中奖一人不认账让美丽中国“从细节出发”19岁小伙救下5人后溺亡 多方发声卫健委通报少年有偿捐血浆16次猝死汪小菲曝离婚始末何赛飞追着代拍打雅江山火三名扑火人员牺牲系谣言男子被猫抓伤后确诊“猫抓病”周杰伦一审败诉网易中国拥有亿元资产的家庭达13.3万户315晚会后胖东来又人满为患了高校汽车撞人致3死16伤 司机系学生张家界的山上“长”满了韩国人?张立群任西安交通大学校长手机成瘾是影响睡眠质量重要因素网友洛杉矶偶遇贾玲“重生之我在北大当嫡校长”单亲妈妈陷入热恋 14岁儿子报警倪萍分享减重40斤方法杨倩无缘巴黎奥运考生莫言也上北大硕士复试名单了许家印被限制高消费奥巴马现身唐宁街 黑色着装引猜测专访95后高颜值猪保姆男孩8年未见母亲被告知被遗忘七年后宇文玥被薅头发捞上岸郑州一火锅店爆改成麻辣烫店西双版纳热带植物园回应蜉蝣大爆发沉迷短剧的人就像掉进了杀猪盘当地回应沈阳致3死车祸车主疑毒驾开除党籍5年后 原水城县长再被查凯特王妃现身!外出购物视频曝光初中生遭15人围殴自卫刺伤3人判无罪事业单位女子向同事水杯投不明物质男子被流浪猫绊倒 投喂者赔24万外国人感慨凌晨的中国很安全路边卖淀粉肠阿姨主动出示声明书胖东来员工每周单休无小长假王树国卸任西安交大校长 师生送别小米汽车超级工厂正式揭幕黑马情侣提车了妈妈回应孩子在校撞护栏坠楼校方回应护栏损坏小学生课间坠楼房客欠租失踪 房东直发愁专家建议不必谈骨泥色变老人退休金被冒领16年 金额超20万西藏招商引资投资者子女可当地高考特朗普无法缴纳4.54亿美元罚金浙江一高校内汽车冲撞行人 多人受伤

深圳坪山网站建设公司 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化