大数据让万物互联互通,及人脑之所不及,开辟了另外一番天地。数据的魅力引千万娇子倒在它的石榴裙下!
什么叫大数据?我想很多人都会跟我有相似疑问。
大数据是能解决实际问题的大数据
当年“啤酒与尿布”的故事一出,大家一下子被大数据迷倒了。“啤酒”与“尿布”在一起,真的能提升销量么?可能是一种结果论。我想解决金融问题,要不要拿来气象数据一起做分析?可能有一定关系,但用气象数据去解决金融问题,会耗费无法预料的时间成本、数据存储成本和计算成本,得不偿失。所以,大数据不是漫无目的、天方夜谭的大数据。至少现阶段,我们应围绕实际问题去寻找大数据。
大数据是能够计算的大数据
人脑能够自动过滤错误数据,并自动修正数据,最后理解数据。但计算机原始状态下是不可能的。AlphaGo的发明,不过是工程师把能遇到的各种情况都写进代码,而处理速度又远超人脑,所以综合来讲,输的可能性很小。然而,如果AlphaGo用在其他领域,他的运气应该没那么好。因为光处理杂乱无章的数据,就耗费一半以上的精力。不能计算的大数据,很难开出沙漠之花。
大数据是富含技术的大数据
近阶段,大家都希望获取政府数据,因为政府数据价值最大。这的确是个真命题。政府数据库,当年耗费了多少人力,用最原始的方式把数据录入到计算机里。人多力量大,自然就成大数据了。而且质量相对较好,非常结构化,录错了可能还会被批评。
因此,我觉得没必要迷恋政府数据。
政府数据价值密度高,但数量级远远少于互联网数据。互联网的非结构化数据如何破局?初中政治时的一句话,技术是第一生产力。针对具体应用场景,面对庞大的数据,需要用工具、编程语言写出人脑思考的处理方法,对杂乱无章的数据进行反复清洗,大浪淘沙,一定可以找到我们需要的数据。
大数据是合作共赢的大数据
古代《道德经》中,提到要“与邻为伴,与人为善”。在大数据的今天,同样适用。永远不要认为自己可以搞定一切。一个人的力量,或者一个团队的力量永远都是那么渺小。
比如,如果你的公司是做应用场景的公司,你的数据中心就没有必要全部寄托自采集数据来建设,完全可以从外部获取大量数据。否则,自己建设采集团队,人力成本和管理成本都很高,还需要思考数据变现的事儿,得不偿失。寻找靠谱的合作伙伴可以事半功倍。同样,学术圈有更深的理论功底,媒体圈有更强大的宣传力量,技术圈有不一样的技术实力,完全可以合作起来,提高自己及公司的光环效应,提高社会的资源配置能力。
大数据是可以产品化的大数据
大数据有没有价值,一方面看能否解决实际问题,另一方面看好不好计算。其实还有一种测量手段,就是在应用过程中发现它是不是你要的大数据。数据应用从公司运营模式角度来看,可分为项目应用和产品应用。
我曾经和一家公司数据中心负责人聊天,他感慨,“我们整天做各类项目,做完这个项目做另外一个项目,导致数据积累分布领域很广,但都不精。”项目交付完,就完事儿了,然而耗费的数据、研发、业务、模型等资源很大,一锤子买卖,没下文了,其实很不值得。但如果做产品,犹如有一个灵魂,指引着去不断思考业务,不断思考模型,不断提升数据质量,不断改进技术,最终公司的人才也会是全能型人才。所以,大数据未来应朝着产品化的大数据前进。
大数据前景可期,理解了大数据的真实内涵,我们仍然要花更多精力呵护大数据,改善数据质量,并在此过程中不断提升技术水平,任重而道远!
iOS无法打赏,所以...
“全中看传媒”由资深媒体人郭全中及其团队共同运营,致力于研究基于互联网的产业融合、TMT创投以及传统产业的转型升级。
联系客服