数据革命:大数据价值实现方法、技术与案例
上QQ阅读APP看书,第一时间看更新

前言

自2008年经济危机爆发以来,从美联储开始,世界各国央行都在通过货币政策防止更大经济危机的爆发。大家同时也认识到货币与经济政策只能缓解经济危机的严重程度,争取时间,而不能从根本上走出经济危机。只有新的技术革命的发生,世界才能真正地走出经济危机。

那么下一场技术革命是什么呢?现在有很多推测,如机器人、工业4.0、虚拟现实(VR)、3D打印、人工智能等。如果研究一下这些技术的影响范围,就会发现它们都难以担当下一次技术革命的重任。

能把世界拉出经济危机的技术革命是怎样的呢?它应该具有以下特征:①应用领域非常广泛,而不局限在某个行业;②影响的人群非常大,会产生大量新兴的职业;③和日常生活息息相关,具有很大的渗透性。

显然,我们正处于信息技术革命的末期,越来越多的迹象表明,信息技术革命已经完成了它的历史使命:①英特尔公司已经走上了巅峰,摩尔定律即将失效,难以开发出更高性能的CPU,即使推出更高性能的CPU,市场需求也不大,市场普遍认为现在的CPU已经能满足现有需求;②智能手机经过高速发展后,市场进入饱和期,功能也基本满足需求,大家更换手机的动力减弱,高速发展的苹果公司销量停止了增长;③微软公司推出的Windows 10操作系统免费升级,但即使使用多种强制手段,大家升级的愿望也比较弱,甚至认为即使很老的Windows XP系统也能满足基本需求。当初人们对信息技术革命的期望,能够做到的已经做到,不能做到的现在暂时也遥遥无期。

信息技术革命给我们留下什么呢?无论是初期的大型计算机,还是后来的个人计算机、笔记本电脑、智能手机,或者现在很时新的物联网,都会在使用过程中产生大量的数据。这种数据分散在不同的地方,很多数据用完即扔。数据只在产生的过程中发生了作用,历史数据价值并没有被发掘。特别是物联网技术产生以后,收集到越来越多的数据,但很多数据还没有找到用处。

在计算机出现的初期,人们就对利用计算机实现决策支持抱有非常大的期待。关于决策支持系统、专家系统的研究,有一段时间也非常红火,但现在看来这个期望还没有实现。以实现决策支持为目的的商业智能领域虽然积累了许多有价值的理论和技术,但达到的效果还不能满足人们的预期目标。

综上所述,作为信息技术革命成果输出的大量数据应该是下一场革命的输入,是新革命的原料,信息技术革命未完成的使命就是下一次革命的目标。因此,下一场革命无疑应该是数据革命。

数据革命是信息技术革命的延伸,它会对社会产生巨大的影响,它完全是从另一个角度去完成信息技术革命不能完成的目标,还会对信息技术革命的产物(比如计算机网络、云计算、物联网)产生更大的需求,导致现在看来过剩的计算能力又变得不足。

数据革命的影响巨大,会深入到社会经济的方方面面。现在凡是用到计算机的地方,都涉及数据的问题。数据的处理对很多人来说都是一个崭新的领域,有很多新知识需要学习,并因此产生许多新兴职业。

目前已经出现一些与数据革命相关的事情,比如政府开放数据。现在欧美很多国家政府制定了政策,要求政府数据、有政府基金资助的科研数据对外开发,把原来保密的数据变成共享。政府建立起开放数据网站,提供可机读的数据。但是他们的工作局限在数据的供应上,对数据如何利用、如何产生价值还依赖社会的创新,并没有找到通用的方法,也没有找到通用的价值创造机制。

数据革命中的数据不一定是大数据,虽然对海量数据的认知离不开大数据技术,但大数据只是数据的一个特例。

本书的目的不在于研究数据的获取,因为社会上已有足够的数据,无数运行的软件日夜不停地产生着新数据,无数程序员在编写着程序准备产生更多的数据。本书更多地是放眼于数据时代对数据的存储和应用,以及数据应用会产生哪些改变,这些改变包括政治的、经济的、社会的等;并且探讨了一个通用的数据产生价值的途径——决策支持,其中涉及一个被称为“鹰眼”的核心技术,这个技术的推广应用将对数据使用发挥很大作用。

利用数据进行革命的最终结果应该是:人们通过对数据的分析,解决了在经济生活中遇到的一些难题,反过来推进更多的数据的产生和存储,再进一步推动更多的信息技术产品的生产和销售,吸引更多的人从事与数据相关的工作。