登陆注册
2841100000006

第6章 大数据,你还不知道的部分(4)

就像我们在现实中交换电子文档时,不一定靠U盘这种物理距离最近的方式,可能会采取MSN或腾讯QQ之类的即时通讯,因为它的速度更快、更方便,而且人们不会计较这些文件绕经网络服务器是否会被长期扫描和监测。这就是技术优势的巨大作用。

第二,数据传输诱导策略。

美国通过扩大数据传输带宽,可以诱导更多的数据流经本国,从它的家门口过,给它做一系列的数据截留分析工作大开方便之门。越多的数据流经美国,它能做的分析监测就越全面,那么它最终的收益就远远超过了风险。比如美国曾租用中国的卫星来传送数据,以提高非洲跟美国之间的带宽,就是一种付出较小风险获得较大收益的表现。

第三,控制数据通道,从其他数据源快速收集信息。

这一策略包括与电信运营商的合作和对其数据源的监控。例如,联邦政府的海外情报监听法庭要求美国电信运营商(Verizon)每天都要向国安局提交元数据--电话记录数据,包括通话双方号码、通话长度等,虽然不包括通话内容,但已经提交了大部分的个人信息。

第四,通过与民营公司和其他国家建立技术联盟来收集和控制数据。

综上,美国最早意识到了需要加强信息管理与网络安全,而加强的办法就是用政府的手去控制民营企业及其他国家的相关服务商,建立技术联盟。

1978年美国国会通过了《外国情报监视法》(FISA),1986年又通过了《电子通信隐私法》(ECPA),1994年通过了《执法通信辅助法》(CALEA),从而建立起了全方位的保障体系,联邦政府可以从容地对本国及外国进行监听监视。

最重要的部分是与技术巨头有关的,即那些控制互联网的大型公司,在《执法通信辅助法》中规定,执法机关可以根据法院监听令直接接入电信网络,启动电信运营商交换机中的监听功能。这意味着美国法律要求电信运营商等网络、通信服务者必须为政府预留一定的接口以备不时之需。

根据《华盛顿邮报》的披露,在“棱镜”计划中,一共涉及至少9家美国的IT公司,微软是在2007年9月11日第一个加入其中的,苹果公司则是在2012年10月最后一个加入的。另外还包括思科、IBM、谷歌、高通、英特尔、雅虎、脸书和甲骨文等。它们几乎垄断了全球IT产业的所有领域,包含了从硬件到软件再到服务三个层面,自然为美国政府提供了强大的技术支持。

比如,如果你的联网电脑使用英特尔公司提供的某款芯片,就会发送一个序列号到英特尔公司,这也意味着在这台电脑上运行的一些信息也可以同时一并发送过去。另外,操作系统是网络软件运行的载体,联网后我们会经常收到自动更新的提示,这意味着垄断操作系统的微软公司可以轻而易举地掌握一台电脑的网络活动。同时,由于操作系统在不断更新,微软公司通常会最早发现其系统存在的漏洞,他们向政府安全部门提供的漏洞信息,会有助于情报机构攻击那些还没有修补漏洞的计算机。

再比如,人们用雅虎邮箱发邮件,用思科的网络电话通话,用谷歌的地图标注、搜索,用脸书发布社交状态,用MSN即时通讯聊天,所有这些网络活动,都会在各大公司的服务器上留下原始数据,而且还是人们主动提供的信息,自己花钱把信息送上门。

这些公司的服务器是如此之多,它们可以向美国政府开放直接访问的后门,帮助情报部门读取数据,甚至能够全程参与国安局的监控计划。这些大数据的技术巨头,成为了政府收集信息和分析数据的绝好帮手,而这在民众毫不知情的情况下就可以完成。

海外盟友的数据来源包括澳大利亚、英国、日本、加拿大和新西兰等国家,比如著名的“五眼联盟”就是由美国、英国、加拿大、澳大利亚和新西兰五国组成,双方互通有无,协同收集数据。联盟成员甚至可以彼此监听对方国内的数据,绕开本方国内的法律禁区,然后交换数据。第五,建立尽可能多的海外非盟友“数据源”。当然,只有盟友数据源是不够的,美国还有大量的海外非盟友数据源。

比如斯诺登就透露说,为了窃取中国大陆的数据,美国采取的办法是直接在中国境内建立数据源合作伙伴。香港中文大学在1995年成立了香港互联网交换中心,它的前身为港中大连接美国的数据专线,拥有服务于全香港的网络数据交换服务器。美国在这个基础上可以方便地潜入进来,对数据进行窃取。

为数众多的黑客也是这一数据源的提供者,国安局旗下有一个叫作TAO的机构,拥有多达六百名高级黑客,来自世界各地(包括中国)。思科公司提供的设备为这项工作提前留下了后门,尽管思科强烈否认这一质疑,但随着曝光的深入,否认的声音已越来越缺乏说服力。

只要能获得海量的源源不断的数据,美国强有力的大数据存储和分析系统就可以派上用场。

第六,建设大型数据中心来保存数据。

为了保存这些海量数据,还需要一个庞大的数据库和处理中心。NSA在犹他州耗资20亿美元建立了一个大型的数据中心,足以保存5000亿G的数据,相当于全球500年的通讯量。为了实现这一目标,NSA专门开发了一个叫作Accumulo的大数据存储系统,并与相关的有军方背景的民用公司合作,开发这一系统的商用版本,来持续获取数据利益。

第七,对元数据的挖掘技术,使美国有能力构筑关联图谱。

元数据是最基本的数据单位,在移动互联网快速发展的今天,我们每个人几乎每时每刻都在产生数据。比如姓名、电话号码、邮箱地址这些都可以称为元数据,它可以拿来当作节点,把有过联系的人、号码、邮箱用线连接起来,就构成了数据和信息背后的人物关联图谱。这表明,元数据虽然单个看起来不怎么重要,但大量集中起来,却非常便于构建个体之间的关联。再比如,对电脑来说,元数据记录了一台计算机的工作环境,包括操作系统、浏览器、应用软件版本等基本信息,那么收集这些元数据,则是黑客发起网络攻击的必备步骤。对元数据的收集与分析能力,说明美国的网络监控水平已经具备了大数据时代的显著特征。有了这种对海量元数据的存储与分析能力之后,这些庞杂的信息经过超级计算机的快速运算,就能从中显露出不易察觉的规律,从而为情报部门提供有效的情报信息。在大数据时代,美国对于关联图谱的挖掘技术进展迅猛,使得从元数据中能够挖掘的隐私越来越多,简直到了无孔不入的地步。换句话说,现有的技术可以做到一切:侦测到你每天发送的短信数量、电话频率以及约会对象,并且深入地探查出你的全部生活和工作习惯,让你成为一个彻底透明的人。

一项调查显示,美国国安局拥有一个4.4万亿个节点、70万亿条相关联的图谱数据。按照全球70亿人口计算,国安局有能力为每人保存将近630种信息,可以分析出每个人多达1万种的关联。要知道,我们只需要4个时间点和位置就可以确定一个人的身份了,而且准确性已经高达95%,那么1万种呢?这一技术的先进程度已超出普通人的想象,相关的技术告诉我们,即使你已隐姓埋名、流落天涯,只要他们有这个意愿,就可以轻松地找到你,并能穷尽你的一切社会关系,甚至比你自己知道的还要多。

第八,强大的分析工具:可视化和实时查询的大数据系统。

美国国安局还拥有一套大数据可视化和实时查询系统,名字叫作BoundlessInformant。它的作用在于将监听、收集到的全球数据进行可视化和能够实时查询的分类,把不同的国家、地区用不同的颜色显示,构建出全球信息分布图。有了这样的大数据系统后,就具备了强大的分析能力,不管收集到多少数据,都可以轻松地整理、归类、分析和预测。

第九,拥有全数据挖掘技术,进行“无死角”数据收集。

美国一方面在挖掘元数据,另一方面也在发展对全数据的收集技术,争取做到数据收集无死角。像有一种叫作Narus的光纤监听设备,可以进行内容层监控,还有一种叫作爱因斯坦3号(Einstein3)的系统,可以对数十亿邮件的全文内容进行扫描。语音监听和识别也是这一工作的组成部分,对多语种的语音视频内容进行分析辨别。

第十,为全球互联网的发展提供了可能性。

我们已经很难用一个特定的词汇来形容全球互联网的结构。但它的主要构成特点我们是清楚的,一方面它就像树一样,有根、主干和枝蔓,最后连接到每一个用户;另一方面它又是平状的,具有平等和无中心的特点,每一个节点的信息都可以在全球的网络中自由流通。也就是说从信息流通来看,互联网是一个扁平的世界,但在管理上,却仍然是自上而下的结构,有骨干网络来处理、管理所有的信息。

例如在中国,163和169骨干网承担着中国80%以上的网络数据流量,它们统称为中国公用计算机互联网(CHINANET),另外还有中国教育和科研计算机网(CERNET),全国科研机构的中国科技网(CSTNET),中国金桥信息网(CHINAGBN)。它们共同组成了由上到下的中国四大骨干网络。从网络监控和攻击的角度来说,自然是从上往下更好,这有利于获取更多的信息,也拥有更大的控制权限。

从棱镜门事件我们可以看到,由于具备足够的资金、技术和不受限制的权力,较大的机构是大数据的最大受益者,它们可以窥探个体的信息和收集、预测人们的关联数据,达到控制人们需求并实现一系列组织计划的目的。要想充分防范大数据技术的滥用,就需要发挥我们每一个人的创造性,由人去主导大数据的进程,而不是成为数据可以控制的一部分。

我们每个普通人都需要参与进来,思考大数据技术的合理开发,并加入这个神奇的新时代,成为它的主人。

同类推荐
  • 创业前三年:创业期盈利模式设计与管理细节大全

    创业前三年:创业期盈利模式设计与管理细节大全

    21世纪是个人创业的时代,但新手创业显得举步维艰。别人创业能够获得成功,到底凭的是什么?答案是:他们走好了创业中最艰难的前几步。好的开端是成功的一半。本书有详尽的分析和经典的案例,帮你排除创业中的困难种种,教你如何轻松创业。
  • 中国经营大师智慧全集

    中国经营大师智慧全集

    要成为一个成功的经营大师,必须放远眼光,必须把握大局,商海竞争是非常惨烈的,只有那些把握大局的人才能驾驭市场。本书中有他们的人生经历,有他们的创业过程,有他们的经营理念,有他们成功后的谈定和失败后的反思……
  • 7-11连锁业真经

    7-11连锁业真经

    保持畅销品的齐全。7-Eleven便利店的主要顾客群为年轻人,那些年人对7-Eleven的评价就会一落千丈。7-Eleven的重视信誉程度由此可见一斑。因此,只要食品一过食用期限,适时订货、迅速交货,年轻人对电视的商品广告极为敏感且反应迅速,是7-Eleven奉行的宗旨之一。如果店主在广告刊登后,鲜度管理:7-Eleven特别注意产品的新鲜,没有进货,立即从陈列架上撤掉进行丢弃
  • 促销管理

    促销管理

    销售过程中,采用适当的促销手段将会有效促进销售额的提高。反之,如果市场定位不明确、促销手段单一,则起不到预期效果。本书适合于教学、基本理论研究和有关人士自学、参考。它将帮助管理者有的放矢地改进当前促销工作中的弊端,针对不同情况选择相应的促销方式,以起到事半功倍的效果。
  • 私营企业经营管理实用必备全书

    私营企业经营管理实用必备全书

    我国市场经济的发展已促成私营经济的迅速成长。曾经有不少人精确地计算,中国的市场已经达到高程度。私营企业增长速度加快,竞争也越来越激烈。在竞争面前,很多私营公司的经营者感到力不从心,希望能加强管理,却又无所适从。面对管理理论与实践之间存在的裂纹,我们希望能够尽全力将二者有机结合。本书就是在这样的思路下产生的——力求将管理理论与私营公司的经营实际有机结合。全书从私营公司成长、家族企业、战略、人力资源管理、财务管理等多角度,向私营公司的经营者介绍一些基本但却前沿的管理理论及管理经验,如企业成长理论、木筒原理等。力图使私营企业主在企业经营管理方面突飞猛进,把私营企业做强做大。
热门推荐
  • 尸心不改

    尸心不改

    控尸门的欢乐二缺弟子江篱炼了一具美得人神共愤引得天雷阵阵的男尸,以为好日子开始了,结果没想到门派惨遭灭门。--情节虚构,请勿模仿
  • 胡闹小皇妃

    胡闹小皇妃

    第一卷<迷糊小皇妃>迟到?撞树?她究竟是造了什么孽,落得如此地步?莫名其妙地掉落古代,成了明岚国艳绝天下的惊澜公主,出嫁乾元皇朝,却在新婚前一天骂了自己未来的相公!逃婚被当场抓包,出宫又被逮住,也罢,她就乖乖做她的太子妃吧!可是,倒霉的事还没结束。夫君的的不信任让她乱伤心一把!好,既然这样,她也不希罕!这个太子妃她不干了!第二卷<百变小皇妃>她,从若妃娘娘顺利升至天翎皇后,夫君疼,百姓爱。他,一番波折后,终于与心爱的人携手此生。她,一个不慎闯入时空隧道,撞上了正闲闲休憩的他。他,天降美女,直直落入他的怀抱。只是,这美女是个百变怪胎,难追得不得了。且看风云又起,来自现代的若兰,紫萝如何勇降亲亲夫君......第三卷终结篇风云又起若兰不知道,真的不知道。为什么一向视她如宝的天云如今却会因为一个女人的挑拨而误解她?是他的心变了,还是她对他而言已不再有吸引力?望着两个可爱的孩子,她心中五味陈杂。天云望着那梅树下的倩影,眼中酸楚难当。那是他至爱的人啊!是他不顾一切,用尽性命来爱的女子!可为何,会弄成今天的地步?纵然伤害重重,他的爱又何曾减少半分?情之为物,最为伤人。纵然相爱又如何?终究世事无常。爱恨交织,恩怨纠缠,这场以爱为名的战役,究竟能否皆大欢喜?且看风云又起。历经重重波折,两心能否始终如一?这是小影第一次写作,自知写的不好,还希望大家多多指教。谢谢!各位看客请注意:其实<迷糊小皇妃>与<百变小皇妃>被来就是同一部的,《百变小皇妃》就是《胡闹小皇妃》的续集。只不过当初由于小影考虑到虽然是同一部,但是有许多情节是需要单独写的,这才将两部分开.可是写了一段时间后,小影发现两部分开的话就有许多情节要重写一遍,所以思考之后,还是将他们重新汇编为一部.反正有分卷管理,所以这才是最好的选择嘛!还请各位见谅哦~~~~~~~~喜欢《小皇妃》的朋友可以加小影的QQ,号码是:476113508验证信息只需输入:若兰或天云就可以了。当然输紫萝或云扬也行。让我们一起来探讨一下哦!呵呵~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
  • 死神的苍穹

    死神的苍穹

    如今却倍受凌辱。封琴大会之上,落魄皇子林沐雨,偶得奇人舍利,修炼通天道法,成为死神一脉最后传人。从此之后,曾享尽荣华,弑仙屠魔,终踏上修道巅峰……
  • 尸心不改

    尸心不改

    控尸门的欢乐二缺弟子江篱炼了一具美得人神共愤引得天雷阵阵的男尸,以为好日子开始了,结果没想到门派惨遭灭门。--情节虚构,请勿模仿
  • 重生相府三小姐

    重生相府三小姐

    她,穿越成青菱国相府嫡三小姐,不受宰相父亲待见,府里姐妹也欺负她。本和清河王爷有婚约在先,庶出妹妹却抢了她的未婚夫,夺夫之仇不共戴天……对她好的人她会好好珍惜,对她不好的人她要以十倍百倍还回来,就这样他们开始了一场剪不断理还乱的爱情纠葛!
  • 爱有8种习惯

    爱有8种习惯

    本书为我们作出见证:当我们向丰盈之爱敞开心扉之时,我们的生命就会变得更美好,并将世界变成更公正而和平的地方。本书帮助我们回答并解决现代人面临的重要问题,诸如:为什么说我现在过的生活就是我应该过的生活?我怎样原谅那些伤害过我的人?我怎样和难以相处的人坦率交流?我怎样给他人提供最大的帮助?我怎样忘掉过去着眼未来?本书通过富于启发性的故事和宝贵建议,向我们展示出:通过培养慷慨、静默、求真、坦诚、游戏、宽恕、慈悲和社群等简单却意义深远的爱的习惯,我们就能创造完满而有意义的生活。
  • 同居后又住进来一个美女

    同居后又住进来一个美女

    在北京这个大大的城市里,每天都有NB的故事发生。一个叫香皂的放荡家伙,刚和女友同居,正欣喜若狂,岂料家里竟然又住进来一个美女,让他口水涟涟、大呼过瘾!新住进来的美女性感活泼,在经历了许多波折之后,她对香皂渐生情愫,秋波流转。同住在一间房内,这到底是幸福的来临,还是性福的考验?多情花心的香皂该和她巫山云雨放纵一番,还是坐怀不乱坚持收敛呢?他善良的女友遭人骚扰,令他头痛不已;工作又频起波折,让他措手不及。他无意中结识的那些BT朋友们,每天都发生着让人爆笑的故事。感情和性欲孰轻孰重?勤奋和沉沦哪个更为诱惑?
  • 圈宠邪妻

    圈宠邪妻

    【轻松版】天宫月老,一根红线冒险牵上火炎邪神的脚。红线彼端,那厮却是没心没肺的无赖女一枚。他乃当今豪门世家的少当家,俊美无铸,阴毒淡静。她是外遇的私生子,低贱贫穷,无貌无德、冷情懒散。她自觉生的伟大,活着憋屈,刚被同父异母的妖孽弟弟抢了男友,便又被老爸的正妻设计变卖,,做与他百位女佣之一。当阴毒的少主碰上冷情的无赖女...当她酒后失误,对他“霸王硬上弓”,从此,一失足成千古恨!啥?要她负责?靠!这是二十一世纪,他怎不效古寻死!又是啥?要她负责的非他一人?她就纳了闷儿了,她几时对这些妖男下的“毒手”,自已怎么不知?一个个全都对她纠缠不休,逼得那少主越来越变态,竟然...[片段一]“你会游泳吗?”某少主垂眸,一丝笑容魅惑众生。“不会。”某女眨着眼,不明就理。“哦?那你想知道学会游泳的最快方法吗?”悠扬清远的声音,却透着深夜一般迷乱的蛊惑。“...”某女虚心进取,仔细聆听。“来人,把她扔进食人鱼池。”[片段二]古典的四柱床,红幔暧昧——“亲爱的,你是不是找错了新郎?”某少主一身新郎装,倚在门边,俊美如斯,阴冷的看着某女。某女手中捏着撕下的男式衬衣,转头,若无其事道:“偷情而已,你可否装做路人甲?”某少主黑了脸,“来人,把那男人剥皮抽血,挫骨扬灰。”【正文版】前世...她脚踝上的红线,连结着他——他却从来不知!她被他毁于无形,魂魄消散——再无转生之机!这一世...他贵乃豪门帝王,俊美异邪,淡静疏离。她被老爸的正妻设计变卖,做与他百位女佣之一。他是神,在她面前却是魔;他尊贵,却独独对她下流无耻;他淡静,在她看来却阴毒如蝮蛇。她喜欢金银,他将金银焚烧化液,蒸发殆尽;她喜欢男人,他将男人剥皮抽筋,挫骨扬灰!只因为...他不准她的眼中有任何事物——除了他!此文女主强大,美男众多,蝮蛇与残狼的性情,邪神与鬼使的身份,预知祥情,请点“阅读此书”,再劳驾点下“收藏”和“推荐”,这将是给烟最大的精神动力。
  • 一分钟纳税与节税

    一分钟纳税与节税

    本丛书是一套财务知识的培训教材我们想把它做成一套可实际运用的实用教程,在1上月,也就是30天之内可以完成的教程。这套书的安排就是要达到这样的目标:简单实用,通俗易懂,既能体现出职业训练的实际感,又具备培训教程的整体感觉。循序渐进的原则,我们不可能把所有行业的财务工作流程和技巧完全容纳进去。本丛书适用于财务工作者、在校大学生、企业管理层、继续教育和专业培训机构以及对财务知识感兴趣的读者。
  • 无敌大小姐

    无敌大小姐

    当现代阴狠毒辣,手段极多的火家大小姐火无情,穿越到一个好色如命,花痴草包大小姐身上,会发生怎样的化学反应?火无情一醒过来就发现,自己竟然在众目睽睽之下上演脱衣秀。周围还有一群围观者。这一发现,让她极为不爽。刚刚穿好衣服,便看到一个声称是自家老头的老不死气势汹汹的跑来问罪。刚上来,就要打她。这还得了?她火无情从生自死,都是王者。敢动她的人,都在和阎王喝茶。于是,她一怒之下,打了老爹。众人皆道:火家小姐阴狠毒辣,竟然连老爹都不放在眼里。就这样,她的罪名又多了一条。蛇蝎美人。穿越后,火无情的麻烦不断。第一天,打了爹。第二天,毁了姐姐的容。第三天,骂了二娘。第四天,当众轻薄了天下第一公子。第五天,火家贴出招亲启事:但凡愿意娶火家大小姐者,皆可去火府报名。来者不限。不怕死,不想活的,欢迎前来。警示:但凡来此,生死皆与火家无关。若有残病者火家一律不负法律责任。本以为无人敢到,岂料是桃花朵朵。美男个个很妖娆一号美人:火无炎。火家大少爷。为人不清楚,手段不清楚。容貌不清楚。唯一清楚的是,他有钱。有多多的钱。火无情语录:钱是好东西。娶了。(此美男,由美瞳掩饰不了你眼神的空洞领养。)火老爷一气之下,昏了过去。家门不幸,家门不幸啊。二号美人:竹清月。江湖人称天上神仙,地上无月。大国师一枚。美得惊天动地。火无情语录:美人好,尤其是自带嫁妆又会预测未来的美人,娶了。(此美男,由东de琳琳领养)三号美人:轩辕子玉。当朝七皇子,游历四国。一张可爱无敌的脸。单纯至极。火无情语录:可爱的孩子好,可爱又乖巧的孩子更好。可爱乖巧又不用给钱的孩子,娶了。(此美男,由刘千绮领养)皇帝听闻,两眼一抹黑。他的儿啊。怎么就这么不争气呢。四号美人:天下第一美男。性格不详,籍贯不详。火无情语录:谜一样的美人,她喜欢。每天都有新鲜感。娶了。(此美男,由告别的爱情li领养。)五号美人:天下第一名伶。火无情语录:解风情的美男,如果没钱花把他卖了都不用调教。娶了。(此美男由伊眸领养。)六号美男:解忧楼楼主。相貌不详,身世不详。爱好杀人。火无情语录:凶恶的美人,她喜欢。娶了。(此美男由陈铭铭领养)七号美男:琴圣。貌如谪仙,琴音杀人。冷清眸子中,百转千回,说尽风流。(此美男由伊眸领养)夜杀:天下第一杀手。(此美男由静寂之夜领养)