与生活“亲密无间”的大数据


与生活“亲密无间”的大数据
文章图片

文章图片
想必大家对大数据这个词并不陌生 。我们每天都会产生大量的数据 , 比如使用支付宝、微信支付产生的每一笔交易都会形成相应的交易数据 , 使用手机上网浏览过程中也会不断产生流量数据 , 通过对这些数据进行挖掘和分析 , 就能产生有价值的信息 。
作为大数据应用或者数据挖掘的典型案例 , “啤酒和尿布”的故事就经常被人提起 。这个故事讲的是美国沃尔玛超市通过分析超市的销售数据 , 发现尿布和啤酒经常出现在同一个购物车里 , 于是就将这两个商品摆放在同一个区域里 。而这个小小的变动也为沃尔玛超市提升了尿布和啤酒的销量 , 增加了销售收入 。这就是基于大数据的挖掘分析发现的新商机 , 其背后的原因也可从美国当时的文化来解释 , 比如母亲在家中照看婴儿 , 父亲则负责去超市购买尿布 , 而父亲在逛超市的时候就会顺带买些啤酒 。当然这只是个故事 , 真实性还有待考证 , 但是这个场景充分体现了大数据技术的商业应用价值 。
与生活“亲密无间”的大数据
文章图片

文章图片
大众点评“必系列”榜单大数据不只是“大”
人们在谈论大数据的时候 , 通常可能会觉得大数据就是数据量大 , 数据多 。这一说法其实并不全面 , 大数据通常被认为具有4V的特点:
Volume(体量大):这也是人们在直观上对大数据的认识 , 就是所谓的“大” 。也即数据规模要海量 。
Velocity(速度快):一方面 , 数据的价值只有通过充分挖掘后才能体现 , 而大量数据的处理分析又需要时间 , 因此就必须要快才行 , 这也体现了“时间就是金钱”的道理 。另一方面 , 数据本身也有时效性 。例如天气预报需要对大量的数据进行处理 , 而天气一直在变化 , 这些数据如果在一段时间内不能处理出结果 , 就已经失去了意义 。
Variety(多样性):数据种类和来源类型要丰富 。数据种类的多样性意味着可以在多个纬度上刻画出数据所描述的对象本身 , 从而形成立体的、全面的、细致的描述 , 有利于从数据中提取出信息 。例如 , 对道路上交通流量进行检测 , 如果只从通过的车辆数据来分析 , 可以根据流量大小来判断哪些路口是拥堵的 。但如果再考慮时间因素 , 就可能发现有些路口是经常拥堵的 , 有些路口只是上下班高峰时段才拥堵 。再比如 , 超市在对销售数据进行分析的时候 , 除了商品本身的属性之外 , 还会考虑消费者的年龄、性别等属性 , 甚至消费当天的天气 。例如 , 沃尔玛超市的“手电筒和馅饼”的故事 , 就讲述了灾害天气带来手电筒和馅饼的销量增长 。
Value(价值大):人们关注大数据就是因为它所带来的价值 , 然而与数据的规模相比 , 其中真正有价值的数据就显得很少了 , 或者说数据价值的密度相对较低 。例如 , 在安防应用场景中的视频监控数据 , 大量的都是正常的不需要关注的视频数据 , 真正有价值的可能就只有短短几秒钟 。这就需要通过机器学习、数据挖掘或者人工智能等方法在大量数据中进行深度分析 , 找出真正有价值的信息 。数字化生活中的大数据
与生活“亲密无间”的大数据
文章图片

文章图片
驾车路线推荐
大数据就在我们身边 , 它融入到日常生活中 , 也改变了人们的生活消费习惯 。例如 , 现在不少人若要去餐馆吃饭时 , 习惯先上大众点评看看推荐菜再点菜;上淘宝购物 , 会按搜索结果去选择 。这些场景正属于大数据技术的典型应用 。还有支付宝年度账单、网易云音乐年度总结、中国移动年度账单等 , 也是基于消费者的行为数据 , 使用大数据统计分析技术进行挖掘后产生的 。再比如 , 大众点评在2019年1月推出的“必逛榜”、“必玩榜”、“必住榜”这3个榜单 , 就是基于海量的消费大数据和实地体验的评选验证数据挖掘出来的 。