虽然大数据是一个泛泛的概念词,但是关于大数据,关于大数据处理分析的话题近来持续升温,现在基本成了新一轮工业革命级别的话题。
大数据是什么,作为数据采集团队 ,我们很长的时间里一直也在思考,什么是大数据,大数据的前景和价值在哪里。
这篇文章里,我会跟大家一起分享我的看法以及各种有趣的内容和资源,它们关于:
1. 什么是大数据
2. 大数据的实践
3. 大数据的应用场景
作者:造数科技
来源:知乎
【一、什么是大数据】
先听听行家的说法:
大数据就是多,就是多。原来的设备存不下、算不动。 ——啪菠萝·毕加索
曾经人们以为最爱吃的派都是苹果派,不过当你有了更细致的数据,你会发现,苹果派受欢迎其实是一种妥协的结果:苹果派是每个人第二喜欢的口味。
拿到小尺寸派的数据以后你更发现,其实苹果派只能排到第四,第五位的样子了。
你有了更多数据,你就能看到之前你看不到的信息。
大数据是大数据的采集
大数据行业,本身是依托于数据源存在的服务性行业。
大数据最根本之处在于信息收集方式出现了重大变化与革新。大数据的出现与大量信息直接在网络呈现关系非常紧密。
微博、天猫、淘宝、微信等等都直接产生了大量包括定位、消息记录、消费记录、评价、阅读等等殊为庞大的信息,可以说互联网企业都自然的带有数据企业的标签。不过如果我们从数据的源头看的更仔细一些,还是会发现,其实很多数据依然是有巨大的采集与归类的需求。
现在人人都说大数据,但其实大家说的是 facebook,twitter,streaming 等等站点上每天产生的信息,做大数据的人呢,会觉得我们有的数据量实在太大了。
许多有效的数据还完全不在网络上,要依靠原始的方法来收集。数据方面还有很多基本层面的问题在非常多的领域非常明显。
【二、大数据的实践】
最近看到个例子,说pokemon go 带给玩家运动量上的变化:
1、应用中的数据分析示例:·
六个月以后,大部分pokemon go 的玩家的运动量逐渐和 non-player基本一致了。
看来确实是一个能用相当效果的游戏。
2、交通状况大数据分析示例:
【三、大数据的应用场景】
如今,在政策上,国家战略层面上,大数据受到的重视程度都越来越高。
应用场景上,现在分布在:
- 供应链和渠道分析&优化
- 定价分析与优化
- 欺诈行为分析&检测
- 设备管理
- 社交媒体分析&客户分析
《大数据时代》一书作者维克托认为大数据时代有三大转变:
第一,我们可以分析更多的数据,有时候甚至可以处理和某个特别现象相关的所有数据,而不是依赖于随机采样。更高的精确性可使我们发现更多的细节。
第二,研究数据如此之多,以至于我们不再热衷于追求精确度。适当忽略微观层面的精确度,将带来更好的洞察力和更大的商业利益。
第三,不再热衷于寻找因果关系,而是事物之间的相关关系。例如,不去探究机票价格变动的原因,但是关注买机票的最佳时机。”大数据打破了企业传统数据的边界,改变了过去商业智能仅仅依靠企业内部业务数据的局面,而大数据则使数据来源更加多样化,不仅包括企业内部数据,也包括企业外部数据,尤其是和消费者相关的数据
据野史记载,中亚古国花剌子模有一古怪的风俗,凡是给君王带来好消息的信使,就会得到提升,给君王带来坏消息的人则会被送去喂老虎。从前的人喜欢批评这位君王的天真品性,以为奖励带来好消息的人,就能鼓励好消息的到来,处死带来坏消息的人,就能根绝坏消息。
在今天这个信息爆炸的时代,我们不一定能让信使一定送来好消息,但你可以让我们的爬虫定时给你送来最有用最合你需求的信息。
【联系青蓝咨询】
地址: 深圳市南山区高新南一道06号TCL大厦B座3楼309室 (公交站:大冲 地铁站:一号线高新园C出口)
邮编:518057
电话:0755-86950769
扫码关注 了解更多课程信息