大数据引发的新挑战

标签: 方法 含金量 挑战 硬件 转型 | 发表时间:2013-01-10 13:00 | 作者:张宇婷
出处:http://content.businessvalue.com.cn

到2015年,数据的增长量可能是现在的24倍,不管是CIO还是IT服务商都需要重新思考IT的新挑战。

全球的经济正在发生着深层次的转型。在未来的10~15年的时间里,全球大概有30亿人将富裕起来。这意味着像中国这样在过去20年当中的一个世界的制造中心,正在转型成为世界上最大的消费市场,新型经济体将持续成为全球经济发展的一个重要动力来源。企业必须挑战包括供应链管理、产业链管理、上下游企业之间的关系、以及如何应对仓储、物流的变化等转型。与此同时,企业面临的一个变化是“大数据的爆发”,数据在企业和整个商业世界中发挥的作用和产生的能量发生了质的变化。

在2012年IBM举行的对全球企业CEO持续调研中,1709位领导者给予了我们3个重要的反馈:第一,必须产生新的人才战略,以价值体系激励员工。旧的管理制度已经淘汰,员工所拥有的交流平台发生了根本的变化。企业能否提供更加开放、互相协作的交流平台正在愈发决定了企业内部管理的顺畅度。第二,企业上下游之间、供应链上的关系正在发生较大的变化。必须创建广泛的伙伴关系,以协作促进创新。第三,在CEO认为的对企业发展最重大意义的外部因素中,“技术”首次被提到了第一位。企业唯有建立必备的分析洞察能力,才能以个性化的服务赢得客户。数据、技术正在引领着企业转型,产生新的价值,为企业开拓新的市场。从“开源节流”的角度来讲,技术更多地被企业理解成为一个节流的方式和辅助手段,如何整合内部系统和资源,如何能够更好地管控自己的企业,如何降低成本、管理好上下游产业链,大数据正在为企业带来更多的机会。

到2015年,数据的增长量可能是现在的24倍。信息量在急剧膨胀,信息的性质也随之而改变。我们预测,所增加的信息绝大部分来源于物联网、传感器、社交网络以及语音数据等。伴随着数据量的增长,企业的新挑战油然而生。首先是数据量巨大,数据处理规模正在从TB级增长到EB级;其次,在速度上,数据不仅成批量地产生,而且呈流状涌现。

因此,企业必须实现数据处理的实时性,在几秒甚至几毫秒内做出反应。同时,企业要思考全新的IT问题,例如:非结构化数据与传统业务系统产生的关系性数据之间是怎样的关系?是否需要从业务角度出发,进行融合及整合等等。数据仓库当中的模型有没有新的变化?语境的搜索、数据生命周期的管理、安全性的管理等等。这些都是需要企业考虑和解决的问题。

以往,企业数据的含金量很高,即一个企业存下来的数据都是经过思考的,要存什么数据,数据存储以后有什么作用,用何种工具进行分析,都是预先想好的,所以留下来的数据极其有用,含金量高。但对于淘宝等电商平台而言,所存储的是各式各样非结构化数据,这之中有很多是没有价值的,“含金量”成为一个必须探讨的问题。

当数据的含金量急剧下降时,如何应对这个挑战,这对硬件、软件处理的能力提出了怎样的新需求?另外,如何构建一个平台使用户无需关注技术上的细节?咨询、服务、硬件、软件,各方面整合起来的能力将是一个厂商能否足够解决大数据问题的关键所在。

(本文根据IBM中国开发中心信息管理总经理朱辉在“2012中国大数据创新峰会”演讲整理,未经本人确认)


商业价值iPhone 客户端

相关文章:

相关 [大数据 挑战] 推荐:

大数据引发的新挑战

- - 《商业价值》杂志
到2015年,数据的增长量可能是现在的24倍,不管是CIO还是IT服务商都需要重新思考IT的新挑战. 全球的经济正在发生着深层次的转型. 在未来的10~15年的时间里,全球大概有30亿人将富裕起来. 这意味着像中国这样在过去20年当中的一个世界的制造中心,正在转型成为世界上最大的消费市场,新型经济体将持续成为全球经济发展的一个重要动力来源.

谈大数据(2)

- - 人月神话的BLOG
对于大数据,后面会作为一个系列来谈,大数据涉及的方面特别多,包括主数据,数据中心和ODS,SOA,云计算,业务BI等很多方面的内容. 前面看到一个提法,即大数据会让我们更加关注业务方面的内容,而云平台则更多是技术层面的内容. 对于大数据会先把各个理解的关键点谈完了,再系统来看大数据的完整解决方案和体系化.

大数据之惑

- - 互联网分析
算起来,接触大数据、和互联网之外的客户谈大数据也有快2年了. 也该是时候整理下一些感受,和大家分享下我看到的国内大数据应用的一些困惑了. 云和大数据,应该是近几年IT炒的最热的两个话题了. 在我看来,这两者之间的不同就是: 云是做新的瓶,装旧的酒; 大数据是找合适的瓶,酿新的酒. 云说到底是一种基础架构的革命.

白话大数据

- - 互联网分析
这个时代,你在外面混,无论是技术还是产品还是运营还是商务,如果嘴里说不出“大数据”“云存储”“云计算”,真不好意思在同行面前抬头. 是千万级别的用户信息还是动辄XXXTB的数据量. 其实,大数据在我的眼里,不是一门技术,而是一种技能,从数据中去发现价值挖掘价值的技能. ”当我掷地有声用这句话开场时,正好一个妹子推门而入,听到这句话,微微一怔,低头坐下.

交通大数据

- - 人月神话的BLOG
本文简单谈下智慧交通场景下可能出现的大数据需求和具体应用价值. 对于公交线路规划和设计是一个大数据潜在的应用场景,传统的公交线路规划往往需要在前期投入大量的人力进行OD调查和数据收集. 特别是在公交卡普及后可以看到,对于OD流量数据完全可以从公交一卡通中采集到相关的交通流量和流向数据,包括同一张卡每天的行走路线和换乘次数等详细信息.

Google+ 是否能挑战Facebook?

- Kempson - 李开复
我们可以从不同的层面来分析G+. 从产品层面:G+是个非常优秀的产品,得到了评论家的好评. G+的用户体验是由Andy Hertzfeld设计,很好地结合了Facebook、Twitter、甚至新浪微博的各种功能. 几个特别优秀的产品功能:1)整合多功能(见下)、2)比Facebook更好用的移动应用,尤其在Android上面、3)好友管理功能比Facebook远远好用,可以有很多个圈子、4)更容易分享、5)更好的聊天功能,尤其是引入视频聊天.

异构计算的挑战

- Guancheng(冠诚) - 技术改变世界 创新驱动中国 - 《程序员》官网
进入新世纪之后,软件研发面临并行编程的技术变革、硬件架构面临异构计算的挑战,这些改变是否意味着新的机遇,取决于能否建立良好的生态链. 2004年12月,C++标准化委员会主席、著名程序员Herb Sutter在自己的个人网站发表了一篇影响深远的文章《免费午餐已经结束》(中文版发表于本刊2006年11月期).

Amazon — 聪明的挑战者

- fordchao - 爱范儿 · Beats of Bits
Amazon 的 Kindle 系列更新时间相当稳定,当前的 Kindle 3 是在去年八月发布的. 现在随着平板大潮的兴起,Amazon 将会跟着下海,推出 Android 版 Kindle 的传言也是不断传出. 或者说,并不是什么传言,而已经成为现实,Amazon 正在等待合适的时机,放出它第一款彩屏的阅读设备.

全球10大数据库

- - 译言-电脑/网络/数码科技
原文: Fiorenttini   译者: julie20098. [非商业性转载必须注明译者julie20098和相关链接. ,否则视为侵权,追究转载责任. 世界气候数据中心:气候全球数据中心, 220TB 的网络数据, 6PB 的其它数据. 国家能源研究科学计算中心,有 2.8PB 容量.

谈大数据分析

- - 人月神话的BLOG
对于数据分析层,我们可以看到,其核心重点是针对海量数据形成一个分布式可弹性伸缩的,高查询性能的,支持标准sql语法的一个ODS库. 我们看到对于Hive,impala,InfoBright更多的都是解决这个层面的问题,即解决数据采集问题,解决采集后数据行列混合存储和压缩的问题,然后形成一个支撑标准sql预防的数据分析库.