登陆注册
2841100000018

第18章 大数据与技术变革(2)

目前,数据服务产业链上真正的大数据玩家,应该是例如谷歌之类的公司,通过重复利用数据以获得利益。谷歌成功地建立了“网页搜索+广告”的商业模式,其所有的业务都是构建在大数据之上的。因此,谷歌是大数据最大的玩家。2012年,它的总营收达到501.75亿美元,利润107.4亿美元,其九成利润来自广告。有咨询公司预测,2017年全球大数据技术的市场空间约500亿美金,约等于谷歌2012年的总营收。这其中,既包括了技术,也包括了大数据工具和相应的服务。

由此观之,在大数据时代的未来,获利最大者将是“数据为王”或者“数据驱动”的业务内涵和模式,发展大数据并挖掘大数据的新价值是其不可不为的原动力。中国也必须尽快扶植相关的产业和公司,以抗衡谷歌这样的跨国巨头,并最终实现赶超。

技术支持与发展

大数据不是口号,而是技术,同时也是技术的整合。大数据的到来,已经成为现实生活中无法逃避的挑战。无论如何,大数据已经成为新一轮技术变革的最强音。关于模式的思考,关于安全的质疑,关于应用的探索,我们必须静下心来看大数据,实实在在了解大数据目前仍然需要解决的问题。

国计民生、商业创新无不与大数据相关,大数据渐渐向人们展现了它为学术、工业和政府带来的巨大机遇。每当我们要做出决策的时候,大数据就无处不在。无论如何,我们都必须直面大数据时代的到来。

大数据给中国带来的巨大挑战,首先是三个重要的技术问题。

☆如何利用信息技术等手段处理非结构化和半结构化数据

大数据的一个重要特点就是数据分散。大数据中,85%都是非结构化的数据,结构化数据只占15%左右。大数据的另一个特点就是不确定性,表现在高维、多变和强随机性等方面。有90%的数据来自开源数据,其余的被存储在数据库中。而大数据则大量存在于社交网络、互联网和电子商务等领域。

值得注意的是,大数据刺激了大量的研究问题。但是大数据每一种表示形式都仅呈现数据本身的侧面表现,并非全貌。比如图像,如何把它转化成多维数据表、面向对象的数据模型或者直接基于图像的数据模型?

如果把通过数据挖掘提取“粗糙知识”的过程称为“一次挖掘”过程,那么将粗糙知识与被量化后的主观知识相结合而产生“智能知识”的过程就叫作“二次挖掘”。这些结构化的粗糙知识可以被主观知识加工处理并转化,生成半结构化和非结构化的智能知识,这也正是基于大数据的数据挖掘所产生的结构化的粗糙知识的一些新特征。

由于大数据所具有的半结构化和非结构化的特点,寻求“智能知识”也就反映了大数据研究的核心价值。非结构化和半结构化数据的个体表现、一般性特征和基本原理尚不清晰,要想实现从“一次挖掘”到“二次挖掘”这样类似事物量到质的飞跃,还必须通过包括数学、经济学、社会学、计算机科学和管理科学在内的多学科交叉来研究和讨论。这些都需要给定一种半结构化或非结构化数据,包括具体的经验、常识、本能、情境知识和用户偏好。

☆如何探索大数据复杂性、不确定性特征描述的刻画方法及大数据的系统建模

大数据的复杂形式导致许多对“粗糙知识”的度量和评估显得尤为重要。这一问题的突破是实现大数据知识发现的前提和关键。这里,人机交互将起到至关重要的作用。管理科学,尤其是基于最优化的理论将在发展大数据知识发现的一般性方法和规律性中发挥重要的作用。

从短期而言,学术界鼓励发展半结构化、非结构化数据之间的转化原则,以支持大数据的交叉工业应用。从长远角度来看,可以将已知的最优化、数据包络分析、期望理论、管理科学中的效用理论应用到“二次挖掘”过程中,研究如何将主观知识融合到数据挖掘产生的粗糙知识中。大数据的个体复杂性和随机性所带来的挑战将促使大数据数学结构的形成,从而导致大数据统一理论的完备。

☆数据异构性与决策异构性的关系对大数据知识发现与管理决策的影响

在大数据环境下,管理决策面临着两个“异构性”问题:“决策异构性”和“数据异构性”。大数据已经改变了传统的管理决策结构的模式。决策结构的变化要求人们去探讨如何为支持更高层次的决策而去做“二次挖掘”。探索大数据环境下决策结构的改变对管理决策结构的影响会成为一个公开的科研问题。寻找大数据的科学模式将带来对研究大数据之美的一般性方法的探究,已知的数据挖掘方法将成为大数据挖掘的工具。

无论大数据带来了哪种数据异构性,大数据中的“粗糙知识”仍可被看作“一次挖掘”的范畴。由于大数据本身的复杂性,这一问题无疑是一个重要的科研课题,传统的管理决策模式取决于对业务知识的学习和日益积累的实践经验,而管理决策又是以数据分析为基础的。大数据是一种具有隐藏法则的人造自然,如果我们找到了将非结构化、半结构化数据转化成结构化数据的方法,通过寻找“二次挖掘”产生的“智能知识”来作为数据异构性和决策异构性之间的桥梁,那么我们将能够很好地应对传统的数据挖掘理论和技术提出的新挑战。尽管这样的探索十分困难,但是研究大数据,是十分必要的。

除此之外,还有一些数据科学的问题,以上也仅仅是研究大数据挑战的一个起点。在未来,相关的问题都可以得到很好地解决。

自从人类进入到信息化时代以来,我们不断产生大量的数据,加之物联网、移动互联网应用的大规模爆发,大量新数据以每年50%的速度在增长,或者说每两年就要翻一番多。数据已经渗透到每一个行业和服务职能领域,随着互联网技术的不断发展,数据本身就是资产,这一点在业界已经形成共识。

人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。在云计算时代,人类通过对海量大数据的高效分析获得商业以及社会价值。云时代的到来、移动终端普及使得数据创造的主体由企业逐渐转向个体,而个体所产生的绝大部分数据为图片、文档、视频等非结构化数据。随着云计算技术的快速普及,人类社会正在步入一个被互联网和通讯技术引爆的大数据时代。大数据技术在中国的发展前景是光明的,前提是我们能够提升和扩充自己的技术王国,建设美好的蓝图。

全球技术研究和咨询公司Gartner将大数据技术列入2012年对众多公司和组织机构具有战略意义的十大技术与趋势之一。Gartner在其新兴技术成熟度曲线中将大数据技术视为转型技术,这意味着大数据技术将在未来3?5年内进入主流。中国也不会落后,“云基地”作为国内最早根植在云计算技术及商业模式的领先者,也一直积极关注大数据带来的发展机遇。

从战略到战术层面,从理念到技术层面,中国都已开始自我的进化,更加适应这个新的时代。中国经过了几十年的积累,让不断产生的海量数据正在成为虚拟世界取之不尽的能源,而它们还远未被开发。

信息化技术的普及使得中国企业更多的办公流程通过网络得以实现,由此产生的数据也以非结构化数据为主。而其他领域的研究,如云计算、下一代分析、内存计算等也都与大数据的研究相辅相成。我们尚无法确定万物是否皆有数据,但是至少已经推开了这样一扇大门:以理性的态度思考大数据,共同保持着持续变革的动力,主动地拥抱这种变化。早在2012年时,非结构化数据就已达到了互联网整个数据量的75%以上,用于提取智慧的大数据,往往是这些非结构化数据。而现在,这个比例已变得更大,我们也拥有了足够的技术支持。换句话说,中国的大数据技术的积累已到达了突破阶段。

“脚印追踪”--个性化的数据推荐系统

如果你在自己经常网购的网站看到“猜你喜欢”之类的东西是那么符合自己的要求,不要惊讶,因为我们每一个人都已经步入了大数据时代。你可以想象一下,也许在未来,每天打开电脑,它会自动把你所有的需求列一个清单,你只需要坐在舒服的沙发上点几个确定选项,就可以轻轻松松地搞定一切了。

不要以为这种情形只发生在科幻电影中。商家只有在满足大众的需求时才能够卖出商品,而这一切都是在满足大众的个性化需求的基础之上实现的。

2011年9月,淘宝公司发起了用户定制电视的活动,2天内1万台订制电视就被抢光。在该活动中,用户可以选择电视的各种属性,包括尺寸、边框、颜色等,厂商根据用户的订制内容生产电视产品,再送货到客户的家中。

从这个具有代表性的案例中我们就可以发现,未来的商业模式正在发生着质的变化,它通过满足个性化需求来提升商业运转的效率,在为消费者提供更好服务的同时,获得更多的利润。

☆“猜你喜欢”的由来

网购中随处可见的“猜你喜欢”是怎么来的呢?事实上,这种推荐方式来源于亚马逊的技术创新。

亚马逊公司的内容起初都是由人工完成的,他们聘请了一个由20人组成的书评团队在网页上推荐有意思的新书。但是随着在亚马逊上架的图书越来越多,这样的人工操作自然越来越显得乏力低效了。

后来,亚马逊的总裁贝索斯决定尝试更有创造性的做法,根据用户的习惯来为其推荐商品。但若想实现个性化推荐,必须要将不同用户进行比较再找到用户之间的关联。但是,面对庞大的数据,这种推荐系统算法烦琐,结果也是不尽如人意。

同类推荐
  • 营销员为什么要读毛选

    营销员为什么要读毛选

    不打无准备之战。在毛泽东的革命思想里学营销。“一切为了群众”与满足消费者需求;“为人民服务”与服务创造价值;“独立自主,自力更生”与品牌营销;“农村包围城市”与市场推进;“没有调查就没有发言权”与营销调研;“集中优势兵力”与重点市场突破;“统一战线”与关系营销,与人斗其乐无穷!
  • 总经理留人之道

    总经理留人之道

    如今企业界面临的最严峻、最重大的挑战不是找不到人才,而是如何找到合适人才,并让其能够始终忠诚于公司,留住人才!在知识经济与经济全球化的影响下,企业与员工在全球范围内进行双向选择,员工的流动率将上升,稳定性也将越低。
  • 切蛋糕

    切蛋糕

    假如你和小伙伴一起开公司,两人商定平分股份。结果你做了所有的工作,而你的小伙伴却十分懒散。那么,你还要把一半公司交到他手里吗?《切蛋糕》旨在教你如何来精确计算每一个创始人应获得的股份,或者公司早期员工应当享有的权益。你将会学到:如何评价一个员工为公司付出的时间和带来的资源价值;如果有创始人离开公司,会带来什么样的损失;以及当你不得不解雇某人时,你该如何处理他的股权。
  • 温州人商道全集

    温州人商道全集

    温州人为什么能赚钱?为什么会赚钱?温州商群是一种独特的商业现象,在商帮史上充满了数不清的传奇!走近温商,我们会观赏到一个斑斓的商业世界,那些宝贵的商业理念、商业智慧、商业精神,它们就像一串串璀璨的珠子,在中国商业史上散发着熠熠光华,也带给渴望致富的个体许多经商启示。
  • 市场营销工作制度规范与流程设计

    市场营销工作制度规范与流程设计

    《市场营销工作制度规范与流程设计》通过最新流程图的绘制方法,将每一个工作流程以最清晰、最简单的方式呈现出来,使企业管理工作者可以得到最实用的工具。制度范例从现实工作中的细节入手,对每一项工作环节都作了切合实际的论述,使企业管理工作者可以从中得到具有可操作性的考评依据和培训蓝本。
热门推荐
  • 没有人告诉你的50条权力法则

    没有人告诉你的50条权力法则

    为什么有些人在职场、官场中能最终出类拔萃,占据支配地位,手握权力,成为生活中的强者?这并不是因为上司的特别垂青,而是他们的思维和行为方式自觉或不自觉地遵循了权力法则。
  • 独爱杀手夫君

    独爱杀手夫君

    本文为轻松文,无虐的过程她只不过是想偷些学校多余的芒果,没想到被一条小毛毛虫害的摔下树来,华丽丽的穿越了,这么幸运的事,她高兴,这是多么难得的事情啊。遇见一个老头,传她全身功力,只需要她为他报仇,她愿意,武功是很重要的。才刚开始找线索,就被一个带面具的男人抓走,要她做他夫人,听说他武功很厉害,钱也很多,权利也很大,她狂喜,钓到金龟婿了。为了躲雨,竟然看了场免费春宫,她感叹,这男人身材真好啊。这皇帝也不知道哪根筋搭错了,竟然看上她这个有夫之妇,她皱眉,我可是一点都没招惹你。为了她夫君,不惜与皇帝拔剑相向,她郁闷,真是个扫把星。武林大会,拔出银萧震惊全场,她得意,小样你姑奶奶不是那么好欺负的。生死之战,拿出秘籍,她无悔,就算你变的越来越残暴,我也只爱你,只要你喜欢,我陪你一起变坏。奕天,最大杀手组织鹜天阁的主上,为人淡漠,寡情,遇见了她,从此世界大变样。他说:“在我心里你比什么都重要。”这样一个武功厉害的男人,吃起醋来行为却无比幼稚。南宫灵,南宫家族的唯一继承人,被她撞见活春宫,从此解下不了缘。他说:“我以为一切对你好,都是因为你是奕天的夫人,其实不是,是我错了,如果你最先遇到的是我,你会爱上我吗?”越是风流的男人,一旦动情越是认真。辰光昱,帝王,踏着父兄的尸体上位,为了得到她不折手段他说:“我哪里比不上他,我拥有全天下,他只有个小小的杀手组织。”就算是帝王,也有控制不了的东西。她淡笑道:“我只爱我的杀手夫君。”推荐好友的文文:幽月如烟《霸皇诱冷妃》游紫怜《皇后哪里逃》四叶草薰《穿越之舞倾天下》逍遥小兔子《魅惑宠妃诱冷君》浅蓝深蓝《小孩妈咪》爬上墙头采红杏《穿越之嫁给傻王爷》紫幽莲《云锦帝》芸芸《我是你爹地》心飞扬《绝色丑颜最后谢谢大家的票票收藏钻石和鲜花,给了小妖很大的动力,谢谢你们欢迎大家与小妖一同讨论剧情,谢谢月颖为小妖建了个群47301089
  • 长乐未央

    长乐未央

    卫国国破,自城楼陨落的不仅是一国公主的非如此不可,更带走了两代君王的痴狂权谋与利用,女色与复国,诱惑与仇恨她游走于两代君王之间,却不知情归何处。
  • 在异界的日子

    在异界的日子

    丹药法器尽在手,升级练功成神路!元慧带着满级的辅助技能穿越异世的生活……变强是主流,且看女主如何攀登上武修的高峰,成为不朽传奇!
  • 宠夫排排站

    宠夫排排站

    (此文已加入VIP半价促销。)★她是护国天女,万民拥戴,皇帝让她三分。她是邪恶妖女,无恶不作,鬼神忌惮一份。她是极品色女,扮猪吃老虎,立志看尽天下美男。可是,她要的只是玩玩而已,为什么这些男人都不遵守游戏规则,缠着她不放?还大喊着什么爱她!一辈子跟着她!甚至要做她的夫!这怎么行?她还要去邂逅她的下一个美男,怎么可能带一大堆碍眼的包袱?月黑风高夜,投奔自由时!★片段一“女人,你对本王做了什么?”男人强忍住身体的燥热,一脸怒意的吼向面前的女人。“去年,我生辰时,你不是送我‘情蛊’吗?”某女好不天真地看着一脸怒火的男人,哼!看你得意!留给他一个得意的笑,转身出门。“喂!女人,你给我站住!”他想要去追,她走了,谁来给他解情蛊?★片段二某女衣衫半解,香肩微露,媚眼如丝,体态妖娆。“木头,你就不想看看我身上的紫罗兰印记?”说话间,已经朝着某神医美男扑过去,我就不信我轩辕浅羽制服不了你!“姑娘,更深露重,还请姑娘穿好衣服,以免着凉!”说着目不斜视的盯着门扉,稳住扑过来的身体,俊脸微红,其实,他想说,他早在帮她疗伤的时候,就已经看遍了她的身子。★片段四“公子,你可不能反悔啊!你说了娶我的!”‘美女’楚楚可怜的脸上一脸哀戚。“可是……可是……你是男的啊!”某女沮丧着脸,没想到自己调戏美女,居然惹到了“伪娘”!“对呀,我是男的,而你是女的,刚刚好!”‘美女’眼里闪过一抹得逞的光芒!★更多精彩内容,详见《宠夫排排站》,且看女主如何扮猪吃掉一大排老虎~~本文YY无限,美男多多,有小阴谋,有大场面,喜欢的亲就收藏个吧!吼吼~~领养榜:轩辕浅羽——孤芳自赏的人领养纳兰释——逆蝶ing亲领养纳兰翼——黯然冰雨亲领养唐念——冰星亲领养金瑶雪——十二翼圣魔天使亲领养纳兰荻——记念幸福亲领养尹天默——甜甜糖糖亲领养
  • 傻子王爷无情妃

    傻子王爷无情妃

    一只毒蝎子,彻底断送了她年轻的生命!别人只知道,那个软弱没主见的女人被迫嫁给一个痴傻呆闷的七皇子。殊不知,她早已不再是“她”!面对痴傻只会憨笑的美男,她气愤难填!你傻,本美女就医好你,谁知医好后,遭到嫌弃,却换来一纸休书,气愤之下,她恨不得与他同归于尽……
  • 经典音乐故事

    经典音乐故事

    西方古典音乐博大、灿烂,源出于古希腊和希伯莱文化,肇端于文艺复兴时期,繁盛在十七世纪到二十世纪初。西方音乐生长在西方文化的土壤里,具有浑厚的文化内涵,在西方的宗教精神、科学思想、民主意识滋养下,更透射出人类文明之光。然而,在一切艺术形式中,音乐里蕴含的捉摸不定的因素最多,这本小册子从西方音乐作品的时代文化背景入手,指明风格,析清流派,点评艺术价值,试图帮助音乐爱好者深入理解音乐的艺术内涵。音乐欣赏既能愉悦身心,又能提高修养。谈音乐、欣赏音乐,就不可避免地涉及一些音乐知识、专业名词一般性判断原则,这本小书里尽量避开复杂的专业术语,而那些浅显的知识一点就通,无须作更多的解释。
  • 左宗棠究竟多彪悍

    左宗棠究竟多彪悍

    他是一位伟大的军事家和政治家,中年步入仕途,被人们誉为“再世诸葛亮”。他究竟有多彪悍?可以在战场上无所畏惧,青年时期怀才不遇,在官场上官运亨通。在接下来的时间里他对抗太平天国、收复边疆,他出生于晚清动乱年代,成为了晚清第一重臣
  • 代嫁之侯门嫡妇

    代嫁之侯门嫡妇

    凌峰说在挤公交车不方便讲电话,吃过饭,她还没有来得及开口电话就被挂断了。她坐在石阶上,仰头着看天,今天的阳光不算太刺眼,给凌峰打了个电话,照得人心里暖融融的,白白的云朵自由自在地在天空飘来飘去。她叫云然,云朵的云,自然的然,她找了个没人的地方休息,可是到底什么时候她才可以像云朵一样自然地无忧无虑地天空漂浮?她就这么看着,等着下午的戏份。可是不对啊,怎么有什么东西……
  • 纵宠千金宝贝

    纵宠千金宝贝

    他是一国皇帝,世人称颂的明君,后宫佳丽三千。但他的后宫中还从来没有出现过这么不驯的女人,他都不嫌弃她丑,她居然还敢嫌弃他,时刻防备着他,还胆敢逃跑让他追!没关系,会跑的猎物才能激发猎人狩猎的欲望,为了得到她,他可以不择手段,强占、监视、纵宠,甚至无暇顾及他的后宫。果然,她终于臣服于他,但他的心里清楚明白,真正臣服的人其实——是他自己!她这辈子注定是他的女人,他的唯一!偏偏,意外来得跟爱情一样突然……※※※最痛萧文:我恋你时你不知,我爱你时你已心有所属。原来有些人错过一时,就是错过了一辈子。最殇慕容天天:为了你,即使化身成为魔鬼又如何?就算是地狱,我要拉着你一起下。原来有一种爱情可以执着直至成殇。最爱夏侯烈:宝贝,你能不能相信我一次,能不能给我一个机会,许我一个一生一世?原来有一种爱情,可以纾尊降贵,甚至可以很卑微。※※※人生最不可理喻的事情,莫过于原来你心心念念暗恋着你的那个人也苦苦爱慕着你!人生最恐怖的事情,莫过于遇到一个莫名其妙,却苦苦追着你,纠缠着你的人!人生最幸运的事情,莫过于遇到一个真正宠你,爱你,疼你,并且你也深爱着的人。******本文有小虐,不喜慎入,但总体是以宠为主,属于半慢热类型。******补充说明一点,一对一,男主女主干净。※※※亲,你最近生活有压力吗,心情压抑吗?(*^__^*)如果你觉得压抑,又有空的话,可以去试读我的完结文(夫君个个都很坏),保管你看了心情会好起来。推荐完结文夫君个个都很坏,网址链接: