新闻资讯 > 资讯列表 > 当前资讯

大数据时代的混沌思维

发布时间:2013-09-18 00:01
2524 次阅读


    随着几本书的热销,整个科技领域貌似被带入了一个新时代,叫做"大数据时代"。从事数据相关的人员,特别是分布式计算的工程师,庆幸自己赶上了开往大数据时代的轮船,回头一望,看到身后大量饥民正奔涌而来...... 


    有些精明的人,趁机办起了“大数据”技术培训班,教授hadoop,hive等带有大数据标签的技术。然而,很多人,始终都还在迷茫,究竟什么是大数据时代?大数据能称为一个时代吗?大数据时代与信息化时代是什么关系?这个时代盛况又是什么样子?我该将自己置身于哪个位置和角色?


  • 什么是大数据时代?

      

    最早提出“大数据”时代到来的是麦肯锡,麦肯锡称:“数据,已经渗透到当今每一个行业和业务领域,成为重要的生产因素。人们对于海量数据的挖掘和运用,预示着新一波生产率增长和消费者盈余浪潮的到来。”

  

     如何理解数据作为重要的生产要素呢?


    此前的生产过程中,追求产品的标准化,生产过程是个黑盒,输入输出是固定的。现在很多自动化生产过程,也用到程序控制,用到知识和数据啊?然而,这些所谓的知识和数据,通常都是事先设置的常量,生产之前就固定好的。


    大数据时代的生产过程,数据是个变量。例如,在面包生产工厂,把订单中顾客口味喜好作为原材料,输入到面包机中,产出的面包正好符合每个顾客的口味。面包工厂并不因为太个性化而增加成本,因为在这个社会中,数据已经和水一样,是最基本的原材料了。


    过去的时代,我们要极力控制环境的变化,避免其对产品质量造成破坏,大数据时代我们要拥抱环境的变化,让变化作为产品的基因。大数据时代的产品,没有绝对的标准化,更多的体现个性化和创造力。


    上述的一切有什么理论依据吗?我们常听说“唯一不变的就是变化”,“世界上没有一条绝对的直线”,我们感觉这个说法是对的,但不知其出自哪里,是否具有普遍意义。


    本文试图用混沌理论里的一些思维方式来看清大数据时代的面目......

 

  • 大数据时代的定位


    大数据时代能称为一个时代吗?还是一个炒作卖机器的泡沫概念。如果真的具有划时代的意义,那么它与过去其他的时代是什么关系呢?


    我们过去通常划分了机械化时代、电气化时代、信息化时代,每个时代都改变了世界、改善了我们的生活。这几个时代的关系是继承和递进的关系,下一个时代以上一个时代为基础。


    其实,混沌理论里的分形理论能更好地概括这个关系。什么是分形,看看下面这个图就明白了?

             

 


    树枝总是在模仿树干的模样,它的子树枝又在无数次的模仿它。   


    分形理论核心内容是事物发展具有自相似性。佛经中说”一沙一世界,一叶一如来“描述的就是这个现象。一个小和尚入神的看着指尖的一粒沙子,通过放大镜的放大,沙子里面有个宇宙,宇宙里面有个地球,地球上有个小和尚,正在入神地看着一粒沙子.......


    分形理论作为认识世界的一种新方法,不仅在于从整体与部分之间的信息“同构”中,找到了从部分过渡到整体的媒介和桥梁,为人们从部分中认识整体、从有限中认识无限提供了可能和根据。我们可以借助这个理论,跳出”大数据时代"的局部,从整体的角度来观察来认识我们置身的时代。


    脱胎


    用”脱胎“二字来形容分形关系也许容易理解。人”脱胎“于父母,树枝”脱胎“于树干.....大数据时代”脱胎“于信息化时代。       


       

    大数据时代脱胎于信息化时代,他有着信息化时代发展相同的一般规律。它以信息化的技术和平台作支撑,依靠新的技术、新的应用开辟新的天地,它也有其他时代的开创、发展、繁荣、凋零的生命过程,有被人遗忘的一天....

      

  •  大数据时代的使命

         

    机械化时代,以蒸汽机、内燃机的发明为驱动,释放化学能替代肌肉的能量,用机械力解放了人力畜力,引发了工业革命,引起了社会变革,改善了人们生活。


    电气化时代,以发电技术、输电技术、电器技术的发明为驱动,释放了能量的空间限制,让能量能高速高效地聚集和转移,让机械化应用从工厂转移到了千家万户。


    信息化时代,以计算机技术的发明为驱动,让信息和知识能高效、高速传输和传播,信息/知识成了社会的主要财富,信息/知识流成了社会发展的主要动力,让产业结构正在实现制造经济向信息经济的转化,改变了人们的生产和生活方式。


    人们对新时代的期待,至少要改变人们的生产和生活方式,至少有一些惊喜。


    那么,大数据时代的驱动力(突破性技术发明)是什么?分布式计算存储?深度学习?总是感觉有些单薄和勉强....


    大数据时代能如何地改变生产和生活?生产更加的自动化、智能化?人们生活更加自主、自由、个性?总觉得不够革命性。

    大数据时代的猜想


    混沌世界的特征除了“脱胎”之外,还有一个特征就是“涌现”。发展到达新阶段后,此前的各种抑制因素不复存在,“生产力”得到空前的释放和发展,会涌现出千千万万的新的成果。如:民国期间的文化艺术的百花齐放,信息化时代的互联网应用的雨后春笋,改革开放后下海创业的风起云涌,PC机的发明后信息产业的迅猛发展。


    可以试想经过现今的混沌阶段,进入大数据时代的平衡发展期后,各种应用也会如雨后春笋、百花齐放。


    青出于蓝而胜于蓝,信息化时代的烙印逐渐被磨掉,人们喜闻乐见的是新时代的新生事物。然而需要明白的是,新时代的出现并不是对旧时代的替代,只是抢了旧时代的风头,新时代的信息化、电气化、机械化依然在发展,而且是大数据时代得以站立的肩膀。


    能否yy一下大数据时代的场景?

    
    目前,除了气象、水文、地址研究机构之外,“大数据”主要来自于互联网应用和政府对公众服务业务中产生的关系和记录,这在人类社会活动与环境关系中产生的数据中,还是沧海一粟。大数据时代数据采集的面将会更加广,数据加工会更加的细,数据的应用将是革命性地繁荣。

    医疗领域将会产生大量的应用,每个人的生理特征和状态都会被采集和分析,目前发现的各种疾病都会找到根源。偶然的治疗措施或偏方都会被全世界共享。


    60亿个人就是60亿个海量存储的硬盘,也是60亿个数据处理站,这里有无尽的数据和无尽的知识宝藏等待分享和发掘。假想有那么一天,将一个头盔戴在全国最后一个抗战老兵的头上,用视频直播他的艰苦抗战历程和人生中的精彩画面,让人们看到真正的历史。


    随着物联网技术的应用普及,人与物、物与物的交互还会产生大量的数据。顺丰快递的货运班机上,包裹与包裹会交朋友,“hi,我们都来自淘宝店....”


    在大数据时代,数据的采集将走向大自然,向自然界要数据。每个人、每个动物、每棵植物都是天然的数据观测站,他们时时刻刻听到的、见到的、闻到的、想到的内容都将是大数据的来源。也许我们会重新定义动物和植物,也许真能看到小草朝我们撇嘴和微笑。

  • 大数据时代的分工和角色


    类比过去的时代,站在大数据时代舞台中央会是哪些角色呢?

    

    设备制造商

    

    生产数据采集、加工设备的公司,通常由电脑产业中的主要制造商转型而来,着力解决数据的采集、转换、计算、存储、传输问题。

    

    数据处理解决方案服务商

    

    集成数据采集加工设备,为行业应用提供系统搭建服务。大数据时代的还会强调从海量数据中萃取知识,数据挖掘和知识发现也是技术竞争的制高点之一。

    

    数据交易市场

    

    数据不会被关闭在一家公司里,成为公司的私有资产。数据就像石油一样,蕴藏在大自然中,需要千千万万的人去采集和加工,然后放到交易市场去售卖,最后被注入到生产车间。面向全社会的数据交易市场会成为大数据时代的一个巨头。

    

    ......

    

    时代的发展总是不可预知的,上述的各种推测都是不准确的;然而,时代的发展也逃脱不了自相似的规律,我们可以从旧时代的发展轨迹中推测新的迹象......

可能感兴趣的职位

30+万海丁微名片用户的选择
微名片
欢迎关注海丁网精准招聘微信公众账号。it求职/it招聘就上海丁网
可能感兴趣的活动全部>
海丁微名片 - 人才地图 - IT求职 - 海丁介绍 - 客服帮助 - 友情链接 - 网站地图

海丁网 @2011-2014(沪ICP备12001151号)