资深大咖多方面剖析:大数据是什么?BigDate时代到来

Big Data

据说,词源出自Alvin Toffler,上世纪70年代的作品《第三次浪潮》。

资深大咖多方面剖析:大数据是什么?BigDate时代到来

虽然大数据是一个泛泛的概念词,但是关于大数据,关于大数据处理分析的话题近来持续升温,现在基本成了新一轮工业革命级别的话题。

大数据是什么,作为数据采集团队 ,我们很长的时间里一直也在思考,什么是大数据,大数据的前景和价值在哪里。这篇文章里,我会跟大家一起分享我的看法以及各种有趣的内容和资源,它们关于:

  1. 什么是大数据

  2. 大数据的实践

  3. 大数据的应用场景

资深大咖多方面剖析:大数据是什么?BigDate时代到来

最近都在说裁员,如果想知道互联网裁员潮对就业薪资是不是真的产生了持久的负面影响,可以用我们的工具,帮你定时每天采集几次生成列表看一看。

(一)什么是大数据

先听听行家的说法:大数据就是多,就是多。原来的设备存不下、算不动。

————啪菠萝·毕加索

大数据,不是随机样本,而是所有数据;不是精确性,而是混杂性;不是因果关系,而是相关关系。 —————Schönberger

曾经人们以为最爱吃的派都是苹果派,不过当你有了更细致的数据,你会发现,苹果派受欢迎其实是一种妥协的结果:苹果派是每个人第二喜欢的口味。

拿到小尺寸派的数据以后你更发现,其实苹果派只能排到第四,第五位的样子了。

你有了更多数据,你就能看到之前你看不到的信息。

大数据最核心的价值是什么?

大数据听着很牛,实际上也很牛吗?

大数据最根本之处在于信息收集方式出现了重大变化与革新。大数据的出现与大量信息直接在网络呈现关系非常紧密。

资深大咖多方面剖析:大数据是什么?BigDate时代到来

微博、天猫、淘宝、微信等等都直接产生了大量包括定位、消息记录、消费记录、评价、阅读等等殊为庞大的信息,可以说互联网企业都自然的带有数据企业的标签。不过如果我们从数据的源头看的更仔细一些,还是会发现,其实很多数据依然是有巨大的采集与归类的需求。

资深大咖多方面剖析:大数据是什么?BigDate时代到来

现在人人都说大数据,但其实大家说的是 facebook,twitter,streaming 等等站点上每天产生的信息,做大数据的人呢,会觉得我们有的数据量实在太大了。

(组织信息仍然是最难的问题)

许多有效的数据还完全不在网络上,要依靠原始的方法来收集。数据方面还有很多基本层面的问题在非常多的领域非常明显。

想学习交流大数据,关注小编,私信发 “大数据 ”获取交流圈。

(二)大数据的实践

最近看到个例子,说pokemon go 带给玩家运动量上的变化:

1、应用中的数据分析示例:

资深大咖多方面剖析:大数据是什么?BigDate时代到来

资深大咖多方面剖析:大数据是什么?BigDate时代到来

六个月以后,大部分pokemon go 的玩家的运动量逐渐和 non-player基本一致了。看来确实是一个能用相当效果的游戏。

2、交通状况大数据分析示例:

资深大咖多方面剖析:大数据是什么?BigDate时代到来

资深大咖多方面剖析:大数据是什么?BigDate时代到来

资深大咖多方面剖析:大数据是什么?BigDate时代到来

资深大咖多方面剖析:大数据是什么?BigDate时代到来

资深大咖多方面剖析:大数据是什么?BigDate时代到来

这里非常有趣

(三)大数据的应用场景

资深大咖多方面剖析:大数据是什么?BigDate时代到来

如今,在政策上,国家战略层面上,大数据受到的重视程度都越来越高。

  1. 应用场景上,现在分布在:

  2. 供应链和渠道分析&优化

  3. 定价分析与优化

  4. 欺诈行为分析&检测

  5. 设备管理

  6. 社交媒体分析&客户分析

资深大咖多方面剖析:大数据是什么?BigDate时代到来

《大数据时代》一书作者维克托认为大数据时代有三大转变:

“第一,我们可以分析更多的数据,有时候甚至可以处理和某个特别现象相关的所有数据,而不是依赖于随机采样。更高的精确性可使我们发现更多的细节。

第二,研究数据如此之多,以至于我们不再热衷于追求精确度。适当忽略微观层面的精确度,将带来更好的洞察力和更大的商业利益。

第三,不再热衷于寻找因果关系,而是事物之间的相关关系。例如,不去探究机票价格变动的原因,但是关注买机票的最佳时机。”大数据打破了企业传统数据的边界,改变了过去商业智能仅仅依靠企业内部业务数据的局面,而大数据则使数据来源更加多样化,不仅包括企业内部数据,也包括企业外部数据,尤其是和消费者相关的数据

据野史记载,中亚古国花剌子模有一古怪的风俗,凡是给君王带来好消息的信使,就会得到提升,给君王带来坏消息的人则会被送去喂老虎。从前的人喜欢批评这位君王的天真品性,以为奖励带来好消息的人,就能鼓励好消息的到来,处死带来坏消息的人,就能根绝坏消息。

在今天这个信息爆炸的时代,我们不一定能让信使一定送来好消息,但你可以让我们的爬虫定时给你送来最有用最合你需求的信息。造数 - 新一代智能云爬虫

资深大咖多方面剖析:大数据是什么?BigDate时代到来


分享到:


相關文章: