邮箱、网络搜索、社交网络上的各种活动……每两年,网络数据的数量都会成倍增长。这些浩如烟海的数据一经整合、过滤和分析,就可以成为企业了解用户的绝佳工具。不过,大数据虽然引起了越来越多的人关注,甚至被一些人称为“新黑金”,但是个人网络数据的保护也成为人们日益关注的焦点。那么,到底个人的隐私重要还是企业的无限商机重要呢?
正如云计算一样,大数据已经成为高新技术发展趋势中不可忽略的一个领域。大数据是指用于分析企业、组织团体、个人乃至彼此相连的物品所产生的庞大数据的一整套技术和方法,一般具有预测性,且具有史无前例的高速度。笼统地说,大数据包括邮箱、短信、照片、视频、社交网络上的评论、标签及状态、上网时间、电子传感器、地理位置标记等。在世界各个角落,每分每秒这些数据都被大量地发布在网络上。
据统计,现在每18个月至24个月网络数据的数量就会翻一番。世界电信巨头移动网络设备销售商爱立信公司(Ericsson)预测,到2020年,全世界将会有500亿件物品(车辆、冰箱、智能传感器等)实现网络连接。目前已有120亿件物品实现了彼此连接。大数据领域另一引人瞩目的现象是开放数据(open data)的兴起,即政府部门推动公共数据对公众的可用性,在这方面美国政府的表现尤为突出。
英国最大的零售企业特易购(Tesco)的会员卡设计者、Dunnhumby公司的创始人Clive Humby认为,这些浩如烟海的数据将会成为“新的石油”。他指出,必须对这些突如其来的资源加以提炼和分类、去粗取精,才能从中获利。IBM总裁Ginn i Rometty表示,这种“新的自然资源”如同“信息海啸”,不出意外将会给世界带来翻天覆地的变化。她甚至预测:“社交网络将会成为企业新的生产线”。
数量、种类、速度和……价值
据咨询机构麦肯锡公司(McKinsey)预测,大数据将会成为“新的革新、竞争和生产力领域”。这些数量庞大、种类丰富、真实性强的数据(文本、视频、声音等)已经无法利用传统的数据库管理工具和决策分析工具进行处理、储存和分析,但可以利用传统图表将其清晰地呈现出来(“数据可视化”的诞生)。
数量、种类和速度,这是定义大数据的三大标准。除此之外,人们还会考虑另外一个因素,即数据的价值或者数据的真实性,因为网络数据并不具有同等的重要性,且并非所有的数据都是值得相信的、可以创造价值的,它们可能会含有一些错误或者重复数据。这也就是说,很多网络信息和内容都是毫无价值的。一个帖子、一个“我喜欢”,论坛上的一条评论或者一条微博,到底它们自身有何价值呢?只有经过整合、过滤和分析,这些数据才能创造巨大的价值。
“信息领域每时每刻都在产生新的词汇和概念。我们试图了解这是否只是昙花一现的短暂现象或是人们追逐流行所带来的效应,以此试图量化全球经济、各行各业乃至个人利用大数据所创造的价值。”大数据领域专家、麦肯锡公司法国区经理Matteo Pacca说。
在欧洲,大数据能够帮助公共领域降低15%至20%的成本,减少偷税漏税,每年提高2500亿欧元的税收收入。至于大型零售业集团,利用大数据可以提高60%的收益。Matteo Pacca指出,“地理定位服务的合理使用,可以为各种服务提供商带来1000亿欧元的收入,为消费者创造7000亿欧元的收入。例如,消费者可以在离家较近的地方买到相对便宜的物品”。
更准确的市场定位
大数据的影响范围极为广泛,不仅涉及各行各业,而且关系到个人、政府部门和公共领域(交通、税收、社会保障,甚至警察部门)。此外,大数据对医学研究领域的影响也很大,基因组和医学成像领域已经启动了大数据计划。
数据作为一种新资源虽然开发程度较低,但是它可以帮助企业实现利益的最大化:密切跟踪各项商务活动和物流环节、检测错误、及时查漏补缺,从而优化操作流程、降低成本。大数据还可以帮助企业明确市场定位,从而提高营业额和市场占有率。“在经济环境恶劣的条件下,企业对大数据这一新的经济增长点极为感兴趣。” Matteo Pacca指出。
他认为,大数据对三个领域的影响最大:一是零售业,因为庞大的客户基础和购物记录是一个潜力无限的数据库;二是医疗健康领域(药品和医疗保险),大数据对于分析药物疗效很有帮助;三是银行保险,大数据可以提高金融产品的针对性,尤其在风险分析方面。美国透明度市场研究公司(Transparency Market Research)发布的一份报告显示,2012年,金融服务、医疗健康和公共领域的大数据市场份额超过了55%。
此外,随着大数据时代的到来,一些新的职业应运而生,如数据科学家(data scientist)、首席数据官(chief data officer,简称CDO)和数据质量负责人,这些职位的等级相当于营销部经理和信息部经理,他们的工作任务是想方设法加强营销部和信息部之间的联系。法国软件编辑联盟(AFDEL)号召政府部门和私人企业共同合作,投入3亿欧元的资金用于推动大数据领域的发展。AFDEL认为,未来五年内,大数据所创造的价值将会达到28亿欧元,同时将会产生10,000个工作岗位。
在法国政府的《数字化路线图》中,法国政府将会拿出1.5亿欧元的援助资金,用于研发五项战略性高新技术,以催生具有世界领先水平的法国企业,大数据就是其中一项。据美国咨询机构Gartner预测,从现在起到2015年,大数据将会在世界范围内创造440万个工作岗位,其中190万个在美国。Matteo Pacca认为:“未来5年至10年内,大数据在欧洲创造的岗位将会达到200万个。”此外,Gartner认为:“2013年将会是大数据技术广泛应用的一年。”
大数据:个人网络数据的保护
大数据领域的飞速发展将会引发一个问题,即如何保护个人的私生活和网络数据。这也是各国政府、欧盟委员会及法国国家计算与自由委员会(CNIL)共同关心的问题,它们致力于出台相应的法律法规和政策(如“opt-in”),保护个人隐私。
此外,互联网数据中心认为,大数据领域的最大潜力在于监控录像数据的利用方面。有效利用监控录像可以减少犯罪、缓解交通拥堵等。美国田纳西州孟菲斯的警察部门利用IBM的分析软件来调查和分析案情,使得当地的犯罪率降低了30%。