知识分享

什么是大数据

发布时间:2018-05-29 点击数:6449

虽然大数据是一个泛泛的概念词,但是关于大数据,关于大数据处理分析的话题近来持续升温,现在基本成了新一轮工业革命级别的话题。

大数据是什么,作为数据采集团队 ,我们很长的时间里一直也在思考,什么是大数据,大数据的前景和价值在哪里。

 

这篇文章里,我会跟大家一起分享我的看法以及各种有趣的内容和资源,它们关于:

1.  什么是大数据

2.  大数据的实践

3.  大数据的应用场景

说明: C:\Users\vince\AppData\Roaming\Tencent\Users\158645116\QQ\WinTemp\RichOle\M)P4A@6$@$[`OQ3_(G8FPJV.png

作者:造数科技
来源:知乎

【一、什么是大数据

先听听行家的说法:

大数据就是多,就是多。原来的设备存不下、算不动。   ——啪菠萝·毕加索

 

曾经人们以为最爱吃的派都是苹果派,不过当你有了更细致的数据,你会发现,苹果派受欢迎其实是一种妥协的结果:苹果派是每个人第二喜欢的口味。

 

拿到小尺寸派的数据以后你更发现,其实苹果派只能排到第四,第五位的样子了。

你有了更多数据,你就能看到之前你看不到的信息。

 

大数据是大数据的采集

 

大数据行业,本身是依托于数据源存在的服务性行业。

 

大数据最根本之处在于信息收集方式出现了重大变化与革新。大数据的出现与大量信息直接在网络呈现关系非常紧密。

说明: https://pic3.zhimg.com/80/v2-30a86eddb63c0b0a8cf893051fad2000_hd.jpg

 

微博、天猫、淘宝、微信等等都直接产生了大量包括定位、消息记录、消费记录、评价、阅读等等殊为庞大的信息,可以说互联网企业都自然的带有数据企业的标签。不过如果我们从数据的源头看的更仔细一些,还是会发现,其实很多数据依然是有巨大的采集与归类的需求。

说明: https://pic2.zhimg.com/80/v2-bf85436bab9ca3b7be9461b7ae889425_hd.jpg

 

现在人人都说大数据,但其实大家说的是 facebooktwitterstreaming 等等站点上每天产生的信息,做大数据的人呢,会觉得我们有的数据量实在太大了。

 

许多有效的数据还完全不在网络上,要依靠原始的方法来收集。数据方面还有很多基本层面的问题在非常多的领域非常明显。

 

 【二、大数据的实践

最近看到个例子,说pokemon go 带给玩家运动量上的变化:

 

1、应用中的数据分析示例:·

说明: https://pic2.zhimg.com/80/v2-1703b683e9ac089d21f9aa2fbea5406d_hd.jpg

说明: https://pic3.zhimg.com/80/v2-b0f50db393bb75cb99bbca81c84ea53b_hd.jpg

六个月以后,大部分pokemon go 的玩家的运动量逐渐和 non-player基本一致了。

看来确实是一个能用相当效果的游戏。

 

2、交通状况大数据分析示例:

说明: https://pic1.zhimg.com/80/v2-917608cf709fc0c8c30eacf529cffeb5_hd.jpg说明: https://pic2.zhimg.com/80/v2-59ce8aa64036c25025fc7a3e4d2f27fe_hd.jpg说明: https://pic4.zhimg.com/80/v2-f941fe1844a6c6c139f141c7452f4b08_hd.jpg说明: https://pic3.zhimg.com/80/v2-68d6b5f70880d2e13102b5e72044c443_hd.jpg 说明: https://pic4.zhimg.com/80/v2-07956900e98b52f374a598df5cc5f9fd_hd.jpg

 

 【三、大数据的应用场景

如今,在政策上,国家战略层面上,大数据受到的重视程度都越来越高。

应用场景上,现在分布在:

  1. 供应链和渠道分析&优化
  2. 定价分析与优化
  3. 欺诈行为分析&检测
  4. 设备管理
  5. 社交媒体分析&客户分析

说明: https://pic4.zhimg.com/80/v2-87cf6d239d0c01591e316edb863c17ff_hd.jpg

 

 

《大数据时代》一书作者维克托认为大数据时代有三大转变:

第一,我们可以分析更多的数据,有时候甚至可以处理和某个特别现象相关的所有数据,而不是依赖于随机采样。更高的精确性可使我们发现更多的细节。
第二,研究数据如此之多,以至于我们不再热衷于追求精确度。适当忽略微观层面的精确度,将带来更好的洞察力和更大的商业利益。
第三,不再热衷于寻找因果关系,而是事物之间的相关关系。例如,不去探究机票价格变动的原因,但是关注买机票的最佳时机。大数据打破了企业传统数据的边界,改变了过去商业智能仅仅依靠企业内部业务数据的局面,而大数据则使数据来源更加多样化,不仅包括企业内部数据,也包括企业外部数据,尤其是和消费者相关的数据

 

据野史记载,中亚古国花剌子模有一古怪的风俗,凡是给君王带来好消息的信使,就会得到提升,给君王带来坏消息的人则会被送去喂老虎。从前的人喜欢批评这位君王的天真品性,以为奖励带来好消息的人,就能鼓励好消息的到来,处死带来坏消息的人,就能根绝坏消息。

在今天这个信息爆炸的时代,我们不一定能让信使一定送来好消息,但你可以让我们的爬虫定时给你送来最有用最合你需求的信息。

 


【联系青蓝咨询】

地址: 深圳市南山区高新南一道06号TCL大厦B座3楼309室 (公交站:大冲   地铁站:一号线高新园C出口) 

    邮编:518057 

    电话:0755-86950769

    邮箱:peixun@shzhchina.com 

    网址:http://www.shzhchina.com

 

                                                                        扫码关注 了解更多课程信息