登陆注册
2418100000003

第3章 身处数据时代,揭开大数据的面纱(2)

大数据方式下的云计算

消费者会觉得大数据和云计算很无聊,可是对于Delphix来说却是一座宝藏,因为它正在利用这种技术进行敏捷数据管理。

Delphix不需要部署冗余的基础设施在自己的敏捷数据管理解决方案之上,还能同时提升流程的速度。客户因此能更为快捷地完成交付使用。其实敏捷数据管理就是企业数据库内虚拟化数据,再提高数据库驱动型应用的开发敏捷性质,因此使数据库和应用管理都发生大的改变。企业的数据库被Delphix放到了云上,再通过数据同步和虚拟化技术交给适当的人最恰当的数据。Delphix宣称有了应用交付解决方案后,应用项目的进度会提升5倍之多,成本会减少90%,事实上2010年Delphix面世后的销售增长率达到了300%。

成立于2010年的Delphix,2012年6月它的C轮融资就完成了2500万美元。这一次融资的领投是Jafco Ventures,投资人中还有Greylock Partners。迄今为止Delphix总融资金额高达4550万美元。公司依赖其“敏捷数据”拿到了超额认购。企业数据库的数据在“敏捷数据”的虚拟化作用下,增强了数据驱动应用的敏捷性,经济数据库和应用管理速度也提升了。

不少企业都把自己的目标设定为借由一个强大的平台来实现品牌推广,可是很多社交网站的数据还是找不到可行的商业模式,因为预期真正得以实现的不多。不过社交数据公司在不断发展壮大,可以想见不远的将来社交网站的影响力利用问题不会再是遥远的梦想。

像是纽约的SumAll公司期望就是要带给每个客户“小而美”的数据。SumAll所提供的平台在于提供给中小企业实时的数据服务,利用桌面、iPhone和安卓系统来访问,可以看到很多可视性的大量数据,也就更便于阅读和观看。SumAll在和Shopify、PayPal和Magento合作电子商务和支付系统的时候,用户点击几下就能完成账户的集成工作。SumAll对于实时数据的分析很快速,再为用户提供一个如社交媒体式的“新闻订阅”一样的简洁分析和见解。SumAll还会为客户提供深入挖掘税收、发货和出售量的服务,甚至连对客户依照不同标准的排序分析也可以完成。

2011年11月成立的SumAll,在2012年6月著名风险投资公司Battery Ventures牵头联合Wellington Partners、Matrix Partners和General Catalyst Partners为SumAll投资了150万美元的种子期融资。SumAll到2012年12月对外宣布获得了600万美元的A轮融资,还是Battery Ventures联合Wellington Patners对其进行投资。目前设在纽约总部的公司有25名员工。

还有Ngdata公司,企业用户和他们的消费者通过它们能够进行一对一的营销模式提供和得到最好的建议和产品。Ngdata曾推出过一个产品Lily集成了内外部的结构化和非结构化的数据。Lily还可以用人工智能拍照工具对消费者的习惯和爱好进行记录。正在快速成长的大数据市场,对企业的价值越来越大了,企业对市场的评估和行为的预判都要通过这些数据分析。ING的投资总监Tom Bousmans说过,消费者所产生的数据有上亿个,企业都可以通过这些来了解用户需求,彼此间还有个性和动态的互动。

成立于2009年的Ngdata的员工现有20名,它们还有类似Wibidata和Spire这样的竞争对手。Ngdata与竞争对手的不同在于它能够提供企业与消费者实现互动的数据解决方案,不仅是单纯专注在大批量数据分析之上。2012年10月Ngdata获得了250万美元的融资。这一次融资的资金主要来自ING、Sniper investment、Plug and Play Ventures等投资机构和一些天使投资人,这份资金将帮助Ngdata推广个性化产品线的拓展,并在纽约和旧金山专门为美国客户设立服务办公室。

Attivio的创始人Ali Riaz觉得企业用户每发送一条查询请求的时候,得到的信息都是具有洞察性的,绝非罗列出来的链接或是一张简单的图表。它回答的问题不仅是“是什么”还有“为什么”,就比如销售量下降是市场需求下降还是销售人员表现不够突出造成的。

任何一家企业要做的工作都是市场营销。近几年社会化媒体的兴起,让营销业者的注意力都集中在了数字营销之上,不过对于这个领域营销人员还欠缺有效的分析。Good Data公司正是瞅准这一商机,开始为营销人员提供集成服务,让他们可以利用微博等社交网络平台进行深度的分析。

大数据的奥秘

事实上并不是说大数据的处理就有多困难。收集一些数据,企业的分析专家团队就可以开始进行数据价值的探索。企业要做的就是要让分析专家团队最近地去接触那些数据,接下来的工作才是开始进行分析探索。要相信分析专家和数据科学家们都会很好地做好他们应该完成的工作。

一个很老的拇指法则指出,分析数据的工作的时间中有70%~80%都花在了收集和整理之上,剩下的20%~30%的时间才是真正的分析。大数据在刚开始处理的时候,分析时间所占的比例就更低了。一开始分析专家会用95%左右的时间来处理数据,甚至有时还会达到100%,接下来才会思考这些数据如何用来做更为深层次的分析。

上述做法必须得到理解。首先分析数据的流程中最重要的一环就是要先弄明白数据源的本质。对它们的表现、调整加载情况过程反复地进行检查,才能保证选择出能够更好地服务于目标的数据,虽然有很多数据并不那么吸引人或是令人兴奋,可确实是选出了最重要的数据。要是这些步骤都被忽略的话,那后面的分析环节就不能继续。

大数据中最优价值的部分被确定了,也就能确定用什么办法选择提取这些最优且精确的部分,这是最为关键的环节。这一环节必然是非常耗时的,尽管是花了比预计还要多的时间,也不用为此懊恼。因为企业的分析专家和业务赞助商是需要在弄明白数据源的过程中寻找一个代价最小、见效最快的方式。不论这东西是不是微不足道,但要给企业展示的一定是最有价值的东西。人们可以因此对此过程保持最高的兴趣,并协助其他人理解进展的过程。

大数据要如何应用到业务中,这是个非常耗时耗力的过程。在这一过程中,企业的分析专家和业务赞助商总是想要找到最有效的方式,为企业展示这方面的进展,并以此来赢得最稳定的回报。

举个欧洲零售商的例子,公司总想获得最为详尽的网络日志数据。公司在经历了一个漫长且复杂的收集数据的过程后,开始实施了一系列简单的举措,其中包括鉴别用户浏览过的商品,在这些数据的基础上,他们建立了一个电子邮件系统,目的是为了给浏览过商品却未购买的顾客发邮件。企业从中获取了高额的利润。

公司采取了类似的基本早期措施外,还会继续投资于收集和加载网络数据之上。最为关键的一点在于他们缺乏处理整套数据流的经验和意愿。试想一下经过数据的深层次分析后他们所得到的回报。也正是因为这些快速及时的进展,每个在企业中的人都乐意再继续下去。他们或许从最早期的举措当中看到了数据的巨大威力,也已经为未来的努力买过单了。

顾客给予的是个体具体行为,这一点是最重要的。上述的例子当中已经让他们认定个人的重要性体现在了模式分析的输入数据上。每个个体从获取价值上来说并不需要识别。分析专家如今已经可以利用数据库技术在不识别个体的情况下完成分析。很多隐私的顾虑就可以就此消除了。事实上不少企业都这样来定位和分析具体个体的顾客。这些企业想必都已经制定了关于隐私保护的政策,不论在什么前提之下,这些隐私政策都要谨慎地遵守。

世界在小数据时代是如何运作的,人们总是希望通过分析和收集数据来证明这一设想。不久以后,大数据时代的到来,人们就不再局限在这设想中。因为数据的分析和研究让人们发现了从前没发现的联系。

自然理论或是社会科学带来的人们的设想,也让我们理解和预测周围的世界。人类在经历假想时代到数据时代的过渡中,很可能会发现理论不再需要了。

《连线》杂志的主编克里斯·安德森(Chris Anderson)在2008年就指出:“科学研究方法因为数据爆炸都变得落伍了。”此后他还在《拍字节时代》(The Peta byte Age)的封面故事中提到了,从某种意义上说,大数据就说明了“理论的终结”。安德森曾提出,如今不再需要一系列因果关系来验证各种设想了,这种传统研究模式早已被无理论指导的纯粹相关关系研究所代替。

安德森为了证明自己的想法,阐述了之所以量子物理学称为纯理论学科的原因正是由于高耗费、复杂实验等等。他所提到的潜在观点就在于量子物理学的理论已经和实际剥离了。他提到了谷歌设计的搜索引擎和基因排序工作,他认为:“海量数据时代,所有其他的学科已经为应用学科所取代。只要是有足够的数据问题就可以说明清楚。假设有一拍字节的数据,并了解数据之间的相互关系,那问题就可以得以解决。”

安德森的文章在专业领域引起了轩然大波,事实上安德森也认识到了自己发出了过于偏激的言论,可是某种程度上说他的话还是值得深究的。当中最为核心的是,截至目前,理论总是用来在实践中理解和分析世界的,可是到了大数据时代理论已经不再必要,数据就够了。也就是说譬如世界的运作、人类的行为等等普遍规则也都不重要了。现在最重要的是数据分析,一切问题都能解决了。

事实上,大数据也是有理论基础的。譬如分析大数据所用的就是统计和数学理论,还可能涉及部分计算机科学理论。尽管和地心引力理论差异很大,但不管怎么说也是理论。大数据分析模式如果建立在这些理论之上,那必然可以实现大数据的预测能力。事实上,为人们提供新鲜深刻的洞见就是大数据的价值所在。

第一要关注的是如何收集数据,是不是数据收集的方便程度就是决定的关键因素呢,还是数据收集的成本呢?众多的理论影响了人们的决定,就如达纳·博伊德(Danah Boyd)和凯特·克劳福德(Kate Crawford)说的那样,一定程度上,结果由选择所决定。谷歌用检索词来预测的是流感而不是鞋码。分析数据的时候选择工具依赖的同样也是理论。研究结果的解读同样应用的也是理论。在大数据时代不代表理论消亡,相反却是在大数据的方方面面都渗透着理论。

安德森作为第一个发现这个问题的人,尽管没有得到合适的答案,也值得让人们欢呼。大数据不会宣称“理论已死”,当然它也从本质上改变了理解世界的方式。以往的习惯都被颠覆了,旧有的制度也面临着巨大的挑战。

当人们选择大数据的理念和方法的时候,就会感觉大数据所释放出来的价值已经让这些不再是一种权衡,而是未来的必然改变。高科技行业当中,不少人认为要依靠新的工具来到达大数据的彼岸,这观点可以理解为由于他们是工具制造者的缘故。大数据趋势的深层原因就是海量数据的存在,包括越来越多以数据形式存在的事物。

当下是大数据发展的最佳时机

迄今为止,在大数据上不少企业都做得不多。幸运的是到了2012年,即便是尚未重视大数据的企业也犹未为晚,当然电子商务行业的企业除外。不过这种情况很快就会发生改变。直到今天,绝大多数的企业所错过的不过是第一个吃螃蟹的机会,所以对它们而言这问题并不大,迎头赶上的机会还是存在的。不过过几年以后,要是这家企业仍旧不关心大数据的话,那它就会被淘汰。所以说,现在是控制大数据最好的时间点。

不管是什么企业获取业务价值都可以通过新的数据源来完成,而那种竞争对手还未发现这方式的情况不多见。大数据给所有人都提供了巨大的商机,无论是谁都要能打败自己的对手才能赢在最前方。未来的几年,人们会陆陆续续看到大数据分析所带来的成功案例。不少案例都会显示部分企业会毫无先兆地就被行业所淘汰了。而这些例子现在就已经引起了众多人的注意了,所谓这些企业正是那些在行业当中反应迟钝,落后守旧的企业。如果在新兴的电子商务行业中,则情况就有很大不同了。

因此,现在是最佳的时机。

实际上,控制大数据绝非想象中的那样难。不少大企业都已经开始了自己的数据收集和分析工作了,还将其视为自己发展战略中的核心部分。像数据仓库、报表和分析都已经应用得非常广泛了。企业只要意识到数据存在的价值,那么只需要延伸和扩展现有的工作就可以做到控制大数据。怀疑论者的话,诸如大数据没有探索价值,它们还没有得到验证,风险太大等等都不能信。过去的几十年,很多同样的借口也在一步步成为数据分析的障碍。还不确定大数据价值的人,必须让他明白大数据的分析和控制不过是现有企业所做事情的延伸罢了,并非本质性的变化。因此,大数据既然在人们身边,就不要害怕它的到来。

同类推荐
  • 通信十年:拥抱互联网

    通信十年:拥抱互联网

    本书从人才、资源、创新三个维度,通过多年的连续新闻报道,试图阐释此前中国电信运营商在供给侧改革中所做的尝试、带来的改变以及难以解决的掣肘,同时收录部分对国外电信运营商的观察报道,以他山之石,寻找殊途同归的方向。在以本书对此前十年通信业梳理之后,愿通信产业能迎来下一个“黄金十年”,而我能继续执笔记录。
  • 信息革命

    信息革命

    随着经济社会的快速发展,电子产品走进了千家万户,与电子产品相伴的信息技术也已渗透到人们生产生活的方方面面。加强信息技术普及,已成为业内人士的共识。鉴于此,在有关部门的大力支持下,经过认真筹划,我们编辑出版了《信息革命》一书。该书以时间为经,在记述信息技术发展历程的同时,深入浅出地介绍了信息技术的相关知识,对人们更好地利用现代信息技术服务经济社会建设和个人生产生活必将产生积极作用。本书由李大东主编。
  • 大话设计模式

    大话设计模式

    本书主要采用JAVA语言介绍设计模式中比较常见的23种设计模式,分29章具体介绍,以现实生活中常见的事情为例来具体分析讲解。
  • 计算机:一部历史

    计算机:一部历史

    《计算机:一部历史》,给大众读者写的计算机科普读物,零门槛入门计算机科学。讲述计算机背后鲜为人知的故事,普及关于计算机和互联网,你不得不了解的知识。在过去数十年里,除非你一直与世隔绝,否则就不可能不受到信息革命的影响。我们身处技术演进史上的计算机时代,无论你是计算机和互联网的拥护者、反对者还是旁观者,无论你是否具备计算机专业背景,只要你使用计算机,这本书就是你的案头必备。
热门推荐
  • 迷锁乾坤

    迷锁乾坤

    明朝正德年间,一方指示藏宝地点的锦帕,牵扯出一个危及帝位的惊天大阴谋。一幅唐伯虎的画作,隐藏了一个致使众多人惨遭杀身之祸的秘密。流落江湖、身怀绝技的安宁公主朱暮雁在回宫途中路遇神秘黑衣人,卷入了一场阴谋纷争当中。女鬼案、密室杀人案、连环杀人案等接连发生,案中有案,迷中藏迷。在追寻宝藏,揭开画作谜底,拯救江山社稷的惊涛骇浪中,朱暮雁与昆仑派掌门杨归鸿发展了一段感人至深的乱世儿女情。
  • 回首又见他

    回首又见他

    28岁的她带着亡夫留下的孩子辛苦过活,本打算凄清过一辈子,与她亡夫样貌酷似的浪荡佳士,却这般真实地出现在她的视野。他的罗曼蒂克伎俩、沾满铜腥的牛皮糖政策,是福?还是祸?她是他五指山中的玩物,还是他掌心里的最后一朵百合?
  • 染云缘

    染云缘

    她是50世纪的天娇,一朝穿越,魂附名满京城的痴傻公主身上。 当清冷的眸子绽放出耀人的光芒,天下棋局,风云已动。 他是权势滔天的王,冷酷无情。可当她的匕首抵住了他的颈脉,薄唇轻勾。引发了怎样的惊世情缘? 血月当空,他一袭白衣,风华绝代,映入她异色双眸,成为不死不灭的印,刻在她心中涟漪之上,挥之不去。 他勾唇缓缓一笑,没有那些海枯石烂的誓言保证,暗紫色的眸子倒映出眼前的人,再,容不下其他。 片段: 山洞之内,男子抱着一个血人,眼角微红: “怎么救她?” “需要一个人和她签订生死契约,承担伤势,若稍有不慎……筋脉尽毁,灵力全废。” 此话一出,他身旁那两个下属几乎下意识的上前一步,想要挺身而出。 “退下。” 男子的目光半刻不离怀中的人,声音带着几分嘶哑: “我来。” 无论如何,我只要你安好,不管付出什么代价,你也绝不能有半点意外。 有我在,就算你死,也要看我同不同意,如若不能同生,那我便陪你一起,共赴九幽黄泉。简介无能,请看正文。 本文不虐无误会,男女主双强双洁双宠,身心干净1v1,小可爱们点个收藏吖~~
  • 梦想乐团

    梦想乐团

    穆老师冲我笑了一下,他说,对啊,这么多键!其实我们常用的远远没有这么多,就那么几个键,但钢琴设计那么多键是有它自己的道理的,就像我们每个成员一样,有的唱高音,有的唱低音,有的唱和声等等。发出声音的总是常常被用到的几个键,但不发出声音的键就不重要吗?不!很重要!就跟我们在工作中一样,有的人是需要经常发出声音的,有的人不需要经常发出声音,但需要他们的时候,就是他们发出声音的时候,所以,生活不如意不用时时抱怨,相反,只要保持好自己的状态就行,轮到需要你的时候,你这个键就要发出你该发的声音,不要弹不准,或者弹不响就行!一首优美的曲子,之所以会让人赏心悦目,是所有的键配合的结果,如果每个键都需要发出声音,那就是乱弹琴!
  • Before He Needs (A Mackenzie White Mystery—Book 5)

    Before He Needs (A Mackenzie White Mystery—Book 5)

    From Blake Pierce, bestselling author of ONCE GONE (a #1 bestseller with over 900 five star reviews), comes book #5 in the heart-pounding Mackenzie White mystery series.In BEFORE HE NEEDS (A Mackenzie White Mystery—Book 5), FBI special agent Mackenzie White finds herself summoned to crack a case she has never encountered before: the victim is not a man or a woman—but a couple.The third couple found dead in their homes this month.As Mackenzie and the FBI scramble to figure out who would want happily-married couples dead, her search takes her deep into a disturbing world and subculture. She quickly learns that all is not what it seems behind the picket fences of perfectly-suburban homes—and that darkness lurks at the edge of even the happiest-seeming families.
  • 缘始于念

    缘始于念

    世间安得两全法,不负如来不负卿。女子经历了两世的等待,而男子却是一世状元又一世僧。
  • 家妻难驯

    家妻难驯

    段春盈从小就与众不同,于是继母借此发作,把她当作疯子送到偏远的庄子上自生自灭。她带着两个小丫鬟,慢慢自给自足,过上舒舒服服的日子,段府把自己叫回去了。段春盈不把段府闹个鸡犬不宁,又如何能咽下这口气?
  • 老婆,谁说你是我妹!

    老婆,谁说你是我妹!

    【伪兄妹恋】+【非小白】+【喜欢的请收藏】人前,他是省委副书记,人后,他是商业界的精英,外加黑道首领!可是,在当红影星梁冰冰面前,他只是她戴着面具的经济人兼助理!然而无人知道,他们还有层兄妹关系!ˇˇˇˇˇ强力推荐新文ˇˇˇˇˇ《暧昧de爱》精彩片段:冰冰:“凉一笑,如果还有下辈子,我一定要当个男人,一个你心爱的男人!”一笑:“不用了,我现在就可以证明,我爱的是女人!”冰冰:“是吗?”一笑:“试试不就知道了?”冰冰:“干嘛,别摸我,还没关灯啦,不要在这里啦,去卧室啦……”一笑:“这是你自找的!”她为了他,红着脸,脱光衣服挑逗,没事就学习电影里的技巧,换来她“小色女”的称号!结果,某人躺在床上五分钟后,冒出一句喷血地“好累啊!我明天还要拍戏呢!”拜托,一直在运动的是他!!“可是,我还是好饿。要不,以后我们自己拍戏卖!我当导演兼男主,女二号给你!”凉一笑说着还无耻地摸摸干瘪的肚子。“为什么我是女二号,我要做女一号!”某人一个翻身,将凉一笑压在身下。“你要当女一号也行,先来个潜规则,伺候伺候我这个导演!”强力推荐新文《暧昧de爱》推荐好友的《书记夫人》
  • UFO大揭秘

    UFO大揭秘

    UFO是不能在实验室进行研究,也没有任何公式可用,连确切的证据都没有。这正是它不为正统科学界承认的一个重要原因。人们已经习惯于借助电子和光学等仪器验测数据,用公式演算分析去证实一个发现。但研究UFO,却没有任何仪器可使用,也无法重演,因而难以让人信服。本书向读者介绍了UFO目击案。这是一本探索飞碟问题的内容丰富的著作。书中收有大量目击报告和调查报告,书中也谈到宇宙生命——外星人的情况。该书材料翔实,情节引人入胜,科学知识十分丰富,值得一读。
  • 灵界

    灵界

    他父亲是灵界至尊势力的一名天之骄子,但因为某些原因被打落凡尘,修为尽失,成为一个废人。他母亲是至尊势力冰灵宫圣女,将来要嫁给升龙阁第一天才。路钧偶得灵界一位至尊遗骨,融入己身,得传承,战八荒,震慑九天,打上至尊势力,为父亲报仇,找回母亲的记忆,杀仇敌,成就灵界掌缘生灭。