Big Pattern:比数据更大的是模式

标签: 科技 big data 评论 IBM Big Pattern | 发表时间:2012-02-18 19:40 | 作者:boxi
出处:http://www.36kr.com

前些天我们编译一篇 《大数据时代》的文章,宣告了大数据时代的到来。现在这不仅仅是大数据而已。对于企业技术算法的大玩家来说,还要找出数据自身以外更大的东西,即大模式。

在线生活的爆炸以及廉价计算机硬件使得存储海量非结构化信息(像电子邮件或互联网点击流)成为了可能,然后再去搜索存储的信息,从中找到某些可以利用的趋势。真正的难点在于高效地去做这件事情。大规模地去做这件事情的公司会在不同的领域之间寻找相似性,希望能找出一种共同的分析手段。

说到算法,“如果我能够用于电网的话,那么也能把它用到供水上,”IBM软件及系统高级副总裁Steve Mills说。甚至跟水和电类似的交通,如果其流动有效的话,也能重用其中的某些算法。Mills先生周三旧金山举行的高盛技术会议上称之为“新数学成本结构的杠杆化。”

此类异花授粉令人想起华尔街上世纪九十年代开始的做法,招聘天文学家和理论数学家来设计晦涩难解的金融产品。现在计算的成本已经下降了如此之多,以至于把那些人才带到其他行业也有其用武之地。Mills先生说,IBM现在是数学博士在全球的最大雇主,在那里,数学家可以将自己的才能发挥到石油勘探和医学之类的事情上。“另外,我们还从事天体物理学、基因体学以及蛋白质组学研究工作,”他说。

过去五年,为了其大数据计划,IBM在收购分析公司方面的花销大约是140亿美元。“我们在寻找不同业务之间的相近性,”Mills先生说:“如果找不到相近性,我们就永远都得不到回报。”

学术和商业的许多领域都出现了寻找通用性及共同利益这种趋势。在极微的纳米级对细胞进行检查,研究人员说,生物学、化学和物理学开始互相令对方土崩瓦解。在更广的模式寻找中,统计学学生用R语言根据计算绿潮的方法证明中美洲对土著人种族灭绝的模式。网络营销人员在若干上下文的环境中寻找你的行为,然后甚至在你都还不知道自己想要的情况下卖给你需要的东西。

也许万物皆有关联,寻找出这种关联是非常吸引人的。虽如此,但是目前还存在着若干挑战。一个多世纪来,实验室的研究模式对于科学进步和产品研发都是非常重要的;也许不久它还得担负起另一个重任,即仅仅根据模式热点定位来寻找出事实。近期公司将不得不做出艰难的选择—投资什么地方,观察哪些信号。什么都想做最终还是会什么都做不了。

Via: 纽约时报

除非注明,本站文章均为原创或编译,转载请注明: 文章来自 36氪


相关 [big pattern 数据] 推荐:

Big Pattern:比数据更大的是模式

- - 36氪
前些天我们编译一篇 《大数据时代》的文章,宣告了大数据时代的到来. 对于企业技术算法的大玩家来说,还要找出数据自身以外更大的东西,即大模式. 在线生活的爆炸以及廉价计算机硬件使得存储海量非结构化信息(像电子邮件或互联网点击流)成为了可能,然后再去搜索存储的信息,从中找到某些可以利用的趋势. 真正的难点在于高效地去做这件事情.

Big Data(大数据)技术简析

- - 服务器运维与网站架构|Linux运维|互联网研究
Big Data是近来的一个技术热点,但从名字就能判断它并不是什么新词. 历史上,数据库、数据仓库、数据集市等信息管理领域的技术,很大程度上也是为了解决大规模数据的问题. 被誉为数据仓库之父的Bill Inmon早在20世纪90年代就经常将Big Data挂在嘴边了. 然而,Big Data作为一个专有名词成为热点,主要应归功于近年来互联网、云计算、移动和物联网的迅猛发展.

文章: 数据集成的演化:从EII到Big Data

- - InfoQ cn
 “企业信息集成(EII):实用方式”于2005年发布,描述了一套集成不同数据源的方法论,它利用了当时的先进技术,如面向服务架构(SOA)、Web Services、XML、资源描述架构(RDF)、基于XML的元数据格式、数据提取、转换和加载(ETL)等. EII基本能够为关系型数据元素提供统一视角,但在性能效率上还无法替代数据仓库和多维数据库.

大数据从“小”做起——中小企业Big Data解决之道

- - 弯曲评论
本文是最新的拙作,希望能大家能提点意见^_^. 任何一个时代或者模式的兴起,都离不开与之相关的Killer App,比如,C/S时代的SAP ERP,互联网 1.0 时代的门户,以及互联网 2.0时代的搜索和SNS等,那么在当今云计算这个时代有那些Killer App呢. 当然首当其冲的肯定是以VMware 和Amazon EC2为代表的虚拟化和相关IaaS服务,除此之外,新近崛起的大数据绝对也是云计算的Killer App之一,并且不仅类似百度、阿里以及腾讯这样的互联网巨头有相关的应用需求,而且根据我个人平时与客户接触,发现有很多普通中小企业,特别是中型的互联网和物联网企业,在这方面的场景也有很多.

大钱:Big Money

- Luosky - 爱…稀奇~{新鲜:科技:创意:有趣}
这是挪威工作室Skrekkøgle带来的一个玩意,大钱(Big Money),它真正的让所谓挣“大钱”变得轻而易举——为啥. 因为这些硬币真的很大,大到你真的可以钻进钱眼……. 好吧,除了自嘲一下你我的身不由己,这玩意最有趣的地方在于,它能让这个世界变得渺小——我猜的话,这意思有两个:(1)人类已经无法战胜金钱了;(2)这个世界其实虚假得可以,何必认真.

一些有用的HTML5 pattern

- - 前端观察
最近在做手机页面时,遇到数字输入的键盘的问题,之前的做法只是一刀切的使用 type="tel",不过一直觉得九宫格的电话号码键盘上的英文字母太碍事了. 于是想要尝试其它的实现方案,最终的结论却令人沮丧. 不过也趁机详细了解了下 pattern这个属性. type="tel" 和 type="number" 的区别.

The Open Session In View Anti-Pattern - Vlad Mihalcea

- -
An anti-pattern (or antipattern) is a common response to a recurring problem that is usually ineffective and risks being highly counterproductive.. When using JPA and Hibernate, the Fetching policy can have one of the biggest impacts on application performance, and, as explained in my.

鼠标指针手写笔:Big Big Cursor

- weawea - 爱…稀奇~{新鲜:科技:创意:有趣}
虽然从苹果iPhone开始的全触摸式操作风行还没有几年,但是鼠标就已经显露出颓势了,以至于就连小弟这种非iPhone用户,面对笔记本的时候也忍不住会想用手指在屏幕上划拉……. ——看上去,我们似乎可以开始悼念鼠标了,比如说用这款鼠标指针手写笔(Big Big Cursor):. 针对iPhone、iPad、安卓等全触摸操作环境设计,采用了超级经典的鼠标指针图案——我们是不能指望在平板上出现这些手势了,但是手里拿着一个放大版的鼠标指针,然后放肆地在娇嫩的屏幕上戳啊戳的,那种视觉效果还挺震撼的,哈哈.

XSS 探索 - big-brother

- - 博客园_首页
正常的页面被渗出了攻击者的js脚本,这些脚本可以非法地获取用户信息,然后将信息发送到attacked的服务端. XSS是需要充分利用输出环境来构造攻击脚本的. 非法获取用户cookie、ip等内容. 劫持浏览器,形成DDOS攻击. Reflected XSS:可以理解为参数型XSS攻击,攻击的切入点是url后面的参数.

Big Data技术综述

- Ben - 《程序员》杂志官网
Big Data是近来的一个技术热点,但从名字就能判断它并不是什么新词. 历史上,数据库、数据仓库、数据集市等信息管理领域的技术,很大程度上也是为了解决大规模数据的问题. 被誉为数据仓库之父的Bill Inmon早在20世纪90年代就经常将Big Data挂在嘴边了. 然而,Big Data作为一个专有名词成为热点,主要应归功于近年来互联网、云计算、移动和物联网的迅猛发展.