登陆注册
2841100000018

第18章 大数据与技术变革(2)

目前,数据服务产业链上真正的大数据玩家,应该是例如谷歌之类的公司,通过重复利用数据以获得利益。谷歌成功地建立了“网页搜索+广告”的商业模式,其所有的业务都是构建在大数据之上的。因此,谷歌是大数据最大的玩家。2012年,它的总营收达到501.75亿美元,利润107.4亿美元,其九成利润来自广告。有咨询公司预测,2017年全球大数据技术的市场空间约500亿美金,约等于谷歌2012年的总营收。这其中,既包括了技术,也包括了大数据工具和相应的服务。

由此观之,在大数据时代的未来,获利最大者将是“数据为王”或者“数据驱动”的业务内涵和模式,发展大数据并挖掘大数据的新价值是其不可不为的原动力。中国也必须尽快扶植相关的产业和公司,以抗衡谷歌这样的跨国巨头,并最终实现赶超。

技术支持与发展

大数据不是口号,而是技术,同时也是技术的整合。大数据的到来,已经成为现实生活中无法逃避的挑战。无论如何,大数据已经成为新一轮技术变革的最强音。关于模式的思考,关于安全的质疑,关于应用的探索,我们必须静下心来看大数据,实实在在了解大数据目前仍然需要解决的问题。

国计民生、商业创新无不与大数据相关,大数据渐渐向人们展现了它为学术、工业和政府带来的巨大机遇。每当我们要做出决策的时候,大数据就无处不在。无论如何,我们都必须直面大数据时代的到来。

大数据给中国带来的巨大挑战,首先是三个重要的技术问题。

☆如何利用信息技术等手段处理非结构化和半结构化数据

大数据的一个重要特点就是数据分散。大数据中,85%都是非结构化的数据,结构化数据只占15%左右。大数据的另一个特点就是不确定性,表现在高维、多变和强随机性等方面。有90%的数据来自开源数据,其余的被存储在数据库中。而大数据则大量存在于社交网络、互联网和电子商务等领域。

值得注意的是,大数据刺激了大量的研究问题。但是大数据每一种表示形式都仅呈现数据本身的侧面表现,并非全貌。比如图像,如何把它转化成多维数据表、面向对象的数据模型或者直接基于图像的数据模型?

如果把通过数据挖掘提取“粗糙知识”的过程称为“一次挖掘”过程,那么将粗糙知识与被量化后的主观知识相结合而产生“智能知识”的过程就叫作“二次挖掘”。这些结构化的粗糙知识可以被主观知识加工处理并转化,生成半结构化和非结构化的智能知识,这也正是基于大数据的数据挖掘所产生的结构化的粗糙知识的一些新特征。

由于大数据所具有的半结构化和非结构化的特点,寻求“智能知识”也就反映了大数据研究的核心价值。非结构化和半结构化数据的个体表现、一般性特征和基本原理尚不清晰,要想实现从“一次挖掘”到“二次挖掘”这样类似事物量到质的飞跃,还必须通过包括数学、经济学、社会学、计算机科学和管理科学在内的多学科交叉来研究和讨论。这些都需要给定一种半结构化或非结构化数据,包括具体的经验、常识、本能、情境知识和用户偏好。

☆如何探索大数据复杂性、不确定性特征描述的刻画方法及大数据的系统建模

大数据的复杂形式导致许多对“粗糙知识”的度量和评估显得尤为重要。这一问题的突破是实现大数据知识发现的前提和关键。这里,人机交互将起到至关重要的作用。管理科学,尤其是基于最优化的理论将在发展大数据知识发现的一般性方法和规律性中发挥重要的作用。

从短期而言,学术界鼓励发展半结构化、非结构化数据之间的转化原则,以支持大数据的交叉工业应用。从长远角度来看,可以将已知的最优化、数据包络分析、期望理论、管理科学中的效用理论应用到“二次挖掘”过程中,研究如何将主观知识融合到数据挖掘产生的粗糙知识中。大数据的个体复杂性和随机性所带来的挑战将促使大数据数学结构的形成,从而导致大数据统一理论的完备。

☆数据异构性与决策异构性的关系对大数据知识发现与管理决策的影响

在大数据环境下,管理决策面临着两个“异构性”问题:“决策异构性”和“数据异构性”。大数据已经改变了传统的管理决策结构的模式。决策结构的变化要求人们去探讨如何为支持更高层次的决策而去做“二次挖掘”。探索大数据环境下决策结构的改变对管理决策结构的影响会成为一个公开的科研问题。寻找大数据的科学模式将带来对研究大数据之美的一般性方法的探究,已知的数据挖掘方法将成为大数据挖掘的工具。

无论大数据带来了哪种数据异构性,大数据中的“粗糙知识”仍可被看作“一次挖掘”的范畴。由于大数据本身的复杂性,这一问题无疑是一个重要的科研课题,传统的管理决策模式取决于对业务知识的学习和日益积累的实践经验,而管理决策又是以数据分析为基础的。大数据是一种具有隐藏法则的人造自然,如果我们找到了将非结构化、半结构化数据转化成结构化数据的方法,通过寻找“二次挖掘”产生的“智能知识”来作为数据异构性和决策异构性之间的桥梁,那么我们将能够很好地应对传统的数据挖掘理论和技术提出的新挑战。尽管这样的探索十分困难,但是研究大数据,是十分必要的。

除此之外,还有一些数据科学的问题,以上也仅仅是研究大数据挑战的一个起点。在未来,相关的问题都可以得到很好地解决。

自从人类进入到信息化时代以来,我们不断产生大量的数据,加之物联网、移动互联网应用的大规模爆发,大量新数据以每年50%的速度在增长,或者说每两年就要翻一番多。数据已经渗透到每一个行业和服务职能领域,随着互联网技术的不断发展,数据本身就是资产,这一点在业界已经形成共识。

人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。在云计算时代,人类通过对海量大数据的高效分析获得商业以及社会价值。云时代的到来、移动终端普及使得数据创造的主体由企业逐渐转向个体,而个体所产生的绝大部分数据为图片、文档、视频等非结构化数据。随着云计算技术的快速普及,人类社会正在步入一个被互联网和通讯技术引爆的大数据时代。大数据技术在中国的发展前景是光明的,前提是我们能够提升和扩充自己的技术王国,建设美好的蓝图。

全球技术研究和咨询公司Gartner将大数据技术列入2012年对众多公司和组织机构具有战略意义的十大技术与趋势之一。Gartner在其新兴技术成熟度曲线中将大数据技术视为转型技术,这意味着大数据技术将在未来3?5年内进入主流。中国也不会落后,“云基地”作为国内最早根植在云计算技术及商业模式的领先者,也一直积极关注大数据带来的发展机遇。

从战略到战术层面,从理念到技术层面,中国都已开始自我的进化,更加适应这个新的时代。中国经过了几十年的积累,让不断产生的海量数据正在成为虚拟世界取之不尽的能源,而它们还远未被开发。

信息化技术的普及使得中国企业更多的办公流程通过网络得以实现,由此产生的数据也以非结构化数据为主。而其他领域的研究,如云计算、下一代分析、内存计算等也都与大数据的研究相辅相成。我们尚无法确定万物是否皆有数据,但是至少已经推开了这样一扇大门:以理性的态度思考大数据,共同保持着持续变革的动力,主动地拥抱这种变化。早在2012年时,非结构化数据就已达到了互联网整个数据量的75%以上,用于提取智慧的大数据,往往是这些非结构化数据。而现在,这个比例已变得更大,我们也拥有了足够的技术支持。换句话说,中国的大数据技术的积累已到达了突破阶段。

“脚印追踪”--个性化的数据推荐系统

如果你在自己经常网购的网站看到“猜你喜欢”之类的东西是那么符合自己的要求,不要惊讶,因为我们每一个人都已经步入了大数据时代。你可以想象一下,也许在未来,每天打开电脑,它会自动把你所有的需求列一个清单,你只需要坐在舒服的沙发上点几个确定选项,就可以轻轻松松地搞定一切了。

不要以为这种情形只发生在科幻电影中。商家只有在满足大众的需求时才能够卖出商品,而这一切都是在满足大众的个性化需求的基础之上实现的。

2011年9月,淘宝公司发起了用户定制电视的活动,2天内1万台订制电视就被抢光。在该活动中,用户可以选择电视的各种属性,包括尺寸、边框、颜色等,厂商根据用户的订制内容生产电视产品,再送货到客户的家中。

从这个具有代表性的案例中我们就可以发现,未来的商业模式正在发生着质的变化,它通过满足个性化需求来提升商业运转的效率,在为消费者提供更好服务的同时,获得更多的利润。

☆“猜你喜欢”的由来

网购中随处可见的“猜你喜欢”是怎么来的呢?事实上,这种推荐方式来源于亚马逊的技术创新。

亚马逊公司的内容起初都是由人工完成的,他们聘请了一个由20人组成的书评团队在网页上推荐有意思的新书。但是随着在亚马逊上架的图书越来越多,这样的人工操作自然越来越显得乏力低效了。

后来,亚马逊的总裁贝索斯决定尝试更有创造性的做法,根据用户的习惯来为其推荐商品。但若想实现个性化推荐,必须要将不同用户进行比较再找到用户之间的关联。但是,面对庞大的数据,这种推荐系统算法烦琐,结果也是不尽如人意。

同类推荐
  • 赚未来十年的钱

    赚未来十年的钱

    对于这个世界上无数投机生意人来说,经济的好坏从来不是问题。甚至于在经济衰退的历程中,商人可以谋取更大的好处,因为商人中的弱者比普通个人更容易倒下去,这个时候“沙滩”上除了尸体还有大量的私人物品无人看管。
  • 德鲁克的管理智慧

    德鲁克的管理智慧

    现代管理之父德鲁克,被管理界尊为“大师中的大师”,他是当今世界引领时代的卓越思考者。本书收集德鲁克著作中的精华思想,并对其所言进行了深刻地分析;同时理论联系实际,结合世界及中国的大中型企业的发展论证德鲁克思想在中国企业界的应用,帮助读者学有所用,也实现德鲁克思想的本土化。
  • 生意人的活法

    生意人的活法

    松下幸之助是一个善于冥思的智者,在他深邃的眼神中,我们可以探求其对于人生的诸多观点,比如:“物质的力量再大,也不能真正俘获人的‘心’。”“只知责备别人的人固然愚蠢、妄自尊大,但是自命不凡的人更令人不齿。”“生活在现代的我们,不能再用前人的观念与方式生活,应当互相尊重和关怀。”“在努力工作的过程中,满怀希望,就不会觉得劳累与辛苦。”本书作者在对松下幸之助的生平、思想和著作进行深入研究后汇编此书,期待大家能够真正领悟大师的智慧。面对这样一位经营之神的成功心得,我们还有什么理由不去认真阅读和领悟一番呢!
  • 攻心销售力:让你业绩倍增的隐秘说服技巧

    攻心销售力:让你业绩倍增的隐秘说服技巧

    《攻心销售力》主要内容包括:隐秘源于内心,说服肇始于思想;隐秘说服是个心理游戏,有效说服才是硬道理;口才加动作,利用你的语言天赋等。
  • 中国式管理的四堂课

    中国式管理的四堂课

    在这样的国际大背景下,它的目标读者是创业中的民营企业家、国有企业的中高层管理人员以及有志于独立创业的人。同时,期望深刻解读中国企业成长的秘密,对于MBA、EMBA的学员和企业管理方向的研究人员来说,本书通过对四家企业经营菅理情况的分析和总结,本书也是很好的学习读物。作为一本介绍企业经营管理经验的案例书,正在成为以哈佛商学院为代表的国际机构的研究课题。,海尔的管理模式、联想的公司精神、华为的狼性文化、万向的长寿基因。探索中国式管理的精髓,这现代管理理论发展的庞大体系增加深具中国特色的鲜活一页
热门推荐
  • 女扮男装:复仇娇娘14岁

    女扮男装:复仇娇娘14岁

    (养成系)九岁那年,她成了他的伴读,与他结拜成兄弟,同吃同睡同学艺;十岁那年,同窗之间流传着这样一个说法:她是他圈养的兔儿爷;十三岁那年,她与他一起南征北战;十四岁那年,她成了他的女人……她接近他的目的:杀他,杀他,杀他,哪怕爱也必须要杀他靠近他的理由:宠她,宠她,宠她,不管她是男还是女
  • 世界历代名人情感揭秘

    世界历代名人情感揭秘

    《世界历代名人情感揭秘》对世界历代一百余位各类名人,包括文学家、艺术家、科学家、君王、领导人。影视歌舞明星……隐秘、经典、曲折、具有代表性的情感历程与影响进行了真实、准确、生动、细致的披露、展示和解读。《世界历代名人情感揭秘》重在揭秘,对这些世界历史上的名人,对于他们在情感等方面的精彩故事,有许多最新的、最近的发现、看法或消息,让我们从另一个侧面认识更真实的他们,他们的期待与追逐,他们的欲望与挣扎……
  • 我是装饰镶贴工能手

    我是装饰镶贴工能手

    《"金阳光"新农村丛书:我是装饰镶贴工能手》针对农民工从事装饰镶贴工而编写,主要介绍墙体涂装、镶贴饰面、金属装饰、木装饰、玻璃装饰等基本知识、施工要求和技能、技巧。《"金阳光"新农村丛书:我是装饰镶贴工能手》由常用装饰镶贴工具、墙面与顶棚抹底灰、一般抹灰工程罩面施工等十二部分构成。
  • 第一杀手:逆天小病妃

    第一杀手:逆天小病妃

    她,曾经是现代黑道上排名第一的杀手,如今却穿越沦为夏府人人唾弃和打骂的小贱种、病秧子。个性桀骜不羁的她,怎会甘心如此卑微地活着,任人践踏和蹂躏?当漆黑冷冽的眸子一睁,病秧子便变成一个惊世骇俗的小天才,光芒乍现,霸气尽露!他,是身份尊贵的二皇子,天赋异禀,同时也是苍茫大陆上闻名遐迩的修炼怪才,一场怪病,让他与身为“病秧子”的她结成连理,从此他们共同上天入地,生死相随,一生一世一双人。
  • 无敌大小姐

    无敌大小姐

    当现代阴狠毒辣,手段极多的火家大小姐火无情,穿越到一个好色如命,花痴草包大小姐身上,会发生怎样的化学反应?火无情一醒过来就发现,自己竟然在众目睽睽之下上演脱衣秀。周围还有一群围观者。这一发现,让她极为不爽。刚刚穿好衣服,便看到一个声称是自家老头的老不死气势汹汹的跑来问罪。刚上来,就要打她。这还得了?她火无情从生自死,都是王者。敢动她的人,都在和阎王喝茶。于是,她一怒之下,打了老爹。众人皆道:火家小姐阴狠毒辣,竟然连老爹都不放在眼里。就这样,她的罪名又多了一条。蛇蝎美人。穿越后,火无情的麻烦不断。第一天,打了爹。第二天,毁了姐姐的容。第三天,骂了二娘。第四天,当众轻薄了天下第一公子。第五天,火家贴出招亲启事:但凡愿意娶火家大小姐者,皆可去火府报名。来者不限。不怕死,不想活的,欢迎前来。警示:但凡来此,生死皆与火家无关。若有残病者火家一律不负法律责任。本以为无人敢到,岂料是桃花朵朵。美男个个很妖娆一号美人:火无炎。火家大少爷。为人不清楚,手段不清楚。容貌不清楚。唯一清楚的是,他有钱。有多多的钱。火无情语录:钱是好东西。娶了。(此美男,由美瞳掩饰不了你眼神的空洞领养。)火老爷一气之下,昏了过去。家门不幸,家门不幸啊。二号美人:竹清月。江湖人称天上神仙,地上无月。大国师一枚。美得惊天动地。火无情语录:美人好,尤其是自带嫁妆又会预测未来的美人,娶了。(此美男,由东de琳琳领养)三号美人:轩辕子玉。当朝七皇子,游历四国。一张可爱无敌的脸。单纯至极。火无情语录:可爱的孩子好,可爱又乖巧的孩子更好。可爱乖巧又不用给钱的孩子,娶了。(此美男,由刘千绮领养)皇帝听闻,两眼一抹黑。他的儿啊。怎么就这么不争气呢。四号美人:天下第一美男。性格不详,籍贯不详。火无情语录:谜一样的美人,她喜欢。每天都有新鲜感。娶了。(此美男,由告别的爱情li领养。)五号美人:天下第一名伶。火无情语录:解风情的美男,如果没钱花把他卖了都不用调教。娶了。(此美男由伊眸领养。)六号美男:解忧楼楼主。相貌不详,身世不详。爱好杀人。火无情语录:凶恶的美人,她喜欢。娶了。(此美男由陈铭铭领养)七号美男:琴圣。貌如谪仙,琴音杀人。冷清眸子中,百转千回,说尽风流。(此美男由伊眸领养)夜杀:天下第一杀手。(此美男由静寂之夜领养)
  • 步步为赢:职业废材逆袭记

    步步为赢:职业废材逆袭记

    昔日她还是废材七小姐,他说,他要娶她,保护她。她答:你可以不爱我,但绝不可以骗我。彼时她已经站在了巅峰,他却与她拔刀相向,就像前世那人一样,将匕首送进了她的胸口。她为他堕入魔道,神挡杀神,人挡杀人,嗜血狂傲。他为他舍身成仁,凤凰涅槃,浴火重生,傲视苍穹。是谁说,当神已无力,便是魔渡众生……
  • 请你给我一点温暖(出版)

    请你给我一点温暖(出版)

    原名《众里寻她千百度》,出版更名《请你给我一点温暖》,已出版上市。当你打开这本书,就打开了一个不曾关注过的世界。千百度,都市中成千上万的被遗弃的狗之一。祝晓辰,患有严重恐狗症的女孩。她们偶然邂逅,随后不幸分离,在彼此寻找中又几次擦肩而过。在漫漫寻找途中,通过各自的角度来观察人间种种,寻找的不止是主人,不止是家人,不止是爱……我们在寻找中回归自己。其它作品:1.惊悚小说《家有诡女初长成》(出版)http://m.pgsk.com/a/50110/2.都市小说《刺红》(出版)http://m.pgsk.com/a/88595/3.纯爱小说《蓝莲》(已出版)http://m.pgsk.com/a/53637/
  • 无敌大小姐

    无敌大小姐

    当现代阴狠毒辣,手段极多的火家大小姐火无情,穿越到一个好色如命,花痴草包大小姐身上,会发生怎样的化学反应?火无情一醒过来就发现,自己竟然在众目睽睽之下上演脱衣秀。周围还有一群围观者。这一发现,让她极为不爽。刚刚穿好衣服,便看到一个声称是自家老头的老不死气势汹汹的跑来问罪。刚上来,就要打她。这还得了?她火无情从生自死,都是王者。敢动她的人,都在和阎王喝茶。于是,她一怒之下,打了老爹。众人皆道:火家小姐阴狠毒辣,竟然连老爹都不放在眼里。就这样,她的罪名又多了一条。蛇蝎美人。穿越后,火无情的麻烦不断。第一天,打了爹。第二天,毁了姐姐的容。第三天,骂了二娘。第四天,当众轻薄了天下第一公子。第五天,火家贴出招亲启事:但凡愿意娶火家大小姐者,皆可去火府报名。来者不限。不怕死,不想活的,欢迎前来。警示:但凡来此,生死皆与火家无关。若有残病者火家一律不负法律责任。本以为无人敢到,岂料是桃花朵朵。美男个个很妖娆一号美人:火无炎。火家大少爷。为人不清楚,手段不清楚。容貌不清楚。唯一清楚的是,他有钱。有多多的钱。火无情语录:钱是好东西。娶了。(此美男,由美瞳掩饰不了你眼神的空洞领养。)火老爷一气之下,昏了过去。家门不幸,家门不幸啊。二号美人:竹清月。江湖人称天上神仙,地上无月。大国师一枚。美得惊天动地。火无情语录:美人好,尤其是自带嫁妆又会预测未来的美人,娶了。(此美男,由东de琳琳领养)三号美人:轩辕子玉。当朝七皇子,游历四国。一张可爱无敌的脸。单纯至极。火无情语录:可爱的孩子好,可爱又乖巧的孩子更好。可爱乖巧又不用给钱的孩子,娶了。(此美男,由刘千绮领养)皇帝听闻,两眼一抹黑。他的儿啊。怎么就这么不争气呢。四号美人:天下第一美男。性格不详,籍贯不详。火无情语录:谜一样的美人,她喜欢。每天都有新鲜感。娶了。(此美男,由告别的爱情li领养。)五号美人:天下第一名伶。火无情语录:解风情的美男,如果没钱花把他卖了都不用调教。娶了。(此美男由伊眸领养。)六号美男:解忧楼楼主。相貌不详,身世不详。爱好杀人。火无情语录:凶恶的美人,她喜欢。娶了。(此美男由陈铭铭领养)七号美男:琴圣。貌如谪仙,琴音杀人。冷清眸子中,百转千回,说尽风流。(此美男由伊眸领养)夜杀:天下第一杀手。(此美男由静寂之夜领养)
  • 消化性溃疡(贴心大夫丛书)

    消化性溃疡(贴心大夫丛书)

    这套丛书的特点主要表现在以下几个方面:1通俗性:采用大众语言讲解医学术语,患者及家属能看得懂,并以生活“比喻”帮助了解;2实用性:学以致用,用得上。一人读书,全家受益,成为“家庭小医生”、左邻右舍的“健康小顾问”;3科学性:不仅知其然,还要了解其所以然。通过临床病症的表现,讲基础理论,理论与实际结合。贯彻“一分为二”的两点论讲解、诊断和治疗,避免绝对化不会使群众无所适从;4权威性:这套丛书的作者,都是具有丰富的经验的临床医生,其中多数是某一专科的专家,并介绍了他们所在单位、姓名、联系方式、出诊等时间等,便于联系,又成了就医指南。
  • 邪魅皇帝的专宠:绝世丑妃

    邪魅皇帝的专宠:绝世丑妃

    她穿越而来,是皇宫中的丑妃,面貌惊人,却封为贵妃。“皇帝叔叔,要不然随便扔一个皇后的宝座给我坐一坐?”月媚儿邪邪一笑,惹得当朝天子恼怒万分。“随便扔一个?你还以为这个世界上朕有几个皇后?月媚儿就你这倾城丑容,你这一生终究只能为妃!只能为妾!”尹赫夜冷笑一声,拂袖而去。撕心裂肺后,她不再相信这所谓的爱情,一心复仇的她,路途中又会遇到一些什么呢?