大数据,变革思维

 ·  2017-05-17 16:41:40  ·  北京瑞铭安普科技有限公司

    人们不再认为数据是静止和陈旧的。但在以前,一旦完成了收集数据的 目的之后,数据就会被认为已经没有用处了。比方说,在飞机降落之后,票 价数据就没有用了(对谷歌而言,则是一个检索命令完成之后)
    如今,数据已经成为了一种商业资本,一项重要的经 济投入,可以创造新的经济利益。事实上,一旦思维转变 过来,数据就能被巧妙地用来激发新产品和新型服务。数 据的奥妙只为谦逊、愿意聆听且掌握了聆听手段的人所知。
    信息社会所带来的好处是显而易见的:每个人口袋里都揣有一部手机, 每台办公桌上都放有一台电脑,每间办公室内都拥有一个大型局域网。但是, 信息本身的用处却并没有如此引人注目。半个世纪以来,随着计算机技术全 面融入社会生活,信息爆炸已经积累到了一个开始引发变革的程度。它不仅 使世界充斥着比以往更多的信息,而且其增长速度也在加快。信息总量的变 化还导致了信息形态的变化——量变引发了质变。最先经历信息爆炸的学科, 如天文学和基因学,创造出了“大数据”这个概念。如今,这个概念几乎 应用到了所有人类致力于发展的领域中。
    大数据并非一个确切的概念。最初,这个概念是指需要处理的信息量 过大,已经超出了一般电脑在处理数据时所能使用的内存量,因此工程师 们必须改进处理数据的工具。这导致了新的处理技术的诞生,例如谷歌的MapReduce 和开源Hadoop 平台(最初源于雅虎)。这些技术使得人们可以处 理的数据量大大增加。更重要的是,这些数据不再需要用传统的数据库表格 来整齐地排列——一些可以消除僵化的层次结构和一致性的技术也出现了。 同时,因为互联网公司可以收集大量有价值的数据,而且有利用这些数据的 强烈的利益驱动力,所以互联网公司就顺理成章地成为最新处理技术的领头 实践者。它们甚至超过了很多有几十年经验的线下公司,成为新技术的领衔使用者。
    今天,一种可能的方式是,亦是本书采取的方式,认为大数据是人们在 大规模数据的基础上可以做到的事情,而这些事情在小规模数据的基础上是 无法完成的。大数据是人们获得新的认知,创造新的价值的源泉;大数据还 是改变市场、组织机构,以及政府与公民关系的方法。
    这仅仅只是一个开始,大数据时代对我们的生活,以 及与世界交流的方式都提出了挑战。最惊人的是,社会需 要放弃它对因果关系的渴求,而仅需关注相关关系。也就 是说只需要知道是什么,而不需要知道为什么。这就推翻 了自古以来的惯例,而我们做决定和理解现实的最基本方 式也将受到挑战。