IT企业利用云计算平台Hadoop的10种方式

标签: it 企业 利用 | 发表时间:2012-06-06 12:41 | 作者:
出处:http://news.cnblogs.com/

如果你是世界上广大 Hadoop 用户的一员,你肯定知道 Google 曾经靠着分布式计算技术(Hadoop),在搜索引擎和广告方面取得了举世瞩目的成就。现在的 Hadoop 不仅是当年的老二 Yahoo 的专用产品了,从 Hadoop 长长的用户名单中,可以看到 Facebook, 可以看到 Linkedin,可以看到 Amazon,可以看到 EMC, eBay,Tweeter,IBM, Microsoft, Apple, HP…。国内的公司有淘宝、百度等等。而今天我们要探讨的是,Hadoop 作为基础云计算平台,除了广告,IT 公司还用哪些方式在利用 Hadoop。

1.   在线旅游

云计算供应商 Cloudera COO Kirk Dunn 表示,目前上 80% 的世界在线旅游使用了 Cloudera 的 Hadoop 服务。他没有透露具体的名单,但著名的 Orbitz Worldwide 是我知道的客户之一。

2.   移动数据

目前 Cloudera 为美国 70% 的智能手机提供 Hadoop 支持,我们可以确定 Dunn 讲的是无限供应商支持的移动数据储存和处理。

3.   电子商务

Dunn 表示 Cloudia 为美国超过 1000 万在线商家提供 Hadoop 服务,eBay 是他们的一个大客户, 因为其要管理一个庞大的个人卖家市场,卖家数量达到 1000 万以上。而 Ebay 在用 Hadoop 服务 90 天后,纯利润增加了3%。

4.   能源发现

雪佛龙代表解释了他们公司利用 Hadoop 的实例:通过分类和处理海洋地震数据可以预测石油储备状况。

5.   节能

雪佛龙代表同时还表示 Hadoop 还用在节能上,雪佛龙利用 Hadoop 来支持其节能系统,顾客们按照系统提示节能的同时也节省了不少钱。而相关人士甚至表示这个理念可以用到精确和长期的基金预测上。

6.   基础架构管理

越来越多的 IT 公司在收集和分析他们的服务器数据,在 Cloudera 讨论会上, NetApp 代表表示他们公司利用 Hadoop 技术从全部的安装点上收集设备 logs (超过千万亿的 logs 数量)。

7.   图片处理

创业公司“Skybox 图片”正是利用 Hadoop 来储存和处理图片的,这些图片是卫星根据地理变化的模式有规律地抓取的高清图片。Skybox 最近获得了 7000 万美元的融资。

8.   欺诈识别

这是个经典实用的话题,这在财政机构和情报机构非常有市场。Cloudera 客户之一 Zions Bancorporation 表示他们利用 Hadoop 储存一切可能预示欺骗性的用户交易和异常情况数据。

9. IT 安全

除了基础架构管理,IT 公司们也开始用 Hadoop 来处理恶意软件和网络攻击数据。去年 Trust

就用 hadoop 为各种 IP 评定分数,然后各大公司就可以决定是否接受那些恶意 IP 的来访。

10.   医疗健康

目前 Apixio 正使用 Hadoop 来帮助他们对病人的回答做语义分析,从而帮助医生,护士更好的掌控病情。

Hadoop 定义:

1. 一个分布式系统基础架构,由 Apache 基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。

2. Hadoop 是一套开源的、基础是 Java 的、目前能够让数千台普通、廉价的服务器组成一个稳定的、强大的集群,使其能够对 pb 级别的大数据进行存储、计算。已经具有了强大稳定的生态系统,也具有很多使用的延伸产品。比如做查询的 Pig, 做分布式命名服务的 ZooKeeper, 做数据库的 Hive 等等。

Via  gigaom

本文链接



相关 [it 企业 利用] 推荐:

IT企业利用云计算平台Hadoop的10种方式

- - 博客园_新闻
如果你是世界上广大 Hadoop 用户的一员,你肯定知道 Google 曾经靠着分布式计算技术(Hadoop),在搜索引擎和广告方面取得了举世瞩目的成就. 现在的 Hadoop 不仅是当年的老二 Yahoo 的专用产品了,从 Hadoop 长长的用户名单中,可以看到 Facebook, 可以看到 Linkedin,可以看到 Amazon,可以看到 EMC, eBay,Tweeter,IBM, Microsoft, Apple, HP….

【How-To】企业HR利用社交媒体招聘的5个步骤

- - SocialBeta
本文编译自Salesforce.com的企业招聘总监 Kevin Blair的文章,可以看到到美国公司,特别是硅谷企业对于社会化招聘的热情. 相比而言,在国内没有让人找如LinkedIn一家独大的社会化招聘平台. 整个社会化招聘市场呈现的是一种相对碎片化的分布. 最近很吸引眼球的3家社会化招聘平台:哪上班、人人招聘、内推网都属于创业初期的平台,用各自新颖的玩儿法对社会化招聘进行实践.

好农民是企业家

- 躲在街角的猫 - 南桥的博客
去上海之前,我跑了一趟宜兴,去部长在太湖边设的农场. 农场我虽然没有去过,但看了很多相片. 这次回去,发觉又增添了两间套房,可供希望躲藏起来搞创作的人居住. 农场有竹林,有茶地,有鱼塘,有山羊,有鸭子,有鸡,物产丰富. 早晨的时候,年龄大一点的老农尹大叔带我参观,去了菜园子. 菜园子种着十几种菜蔬,一茬罢了一茬跟上,几乎吃不完.

企业用研二三事

- - 腾讯CDC
  互联网产品层出不穷,不同于大多数个人产品,企业产品的直接使用者为企业用户. 企业用户要比个人用户复杂得多,有着相当大的区别. 除了个人因素外,还有环境、组织、个体间等影响因素. 对应地,在做企业产品的用户研究工作时,我们需要针对企业用户的特殊性和复杂性来进行相应的规划和执行. 目前我主要从事企业产品的用户研究工作,之前也从事过一段时间的个人产品用户研究工作,对企业用研和个人用研的差异小有感受.

再谈企业架构

- - 人月神话的BLOG
本篇为杂谈,谈下最近关于企业架构的一些思考. 对于企业架构有很多定义,简单来说的话可以说企业架构包括了三个方面的内容,一个是业务的现状和建模,一个是IT的现状和建模,还有就是业务和IT的匹配. 业务重点是流程和数据,IT的重点是应用和技术. 所有的企业架构基本都包括了这三个方面的内容,只是前面增加了企业愿景和业务目标驱动,后面增加了可落地的实施策略和计划.

Google+对企业用户说“去”,Facebook对企业用户说“来”

- Kainy - 36氪
上周Google+把企业用户拒之门外,包括36氪在内的很多网站的Google+档案被冻结,至今尚未解封. 还有哥们儿对Google此举表示不忿儿,发表了一封满腔怒火的公开信. Google表示这是为了用户好,为了打造一个纯净的社交产品,谁知道是不是因为因为他们经验不足呢. 对Google来说,当务之急还是尽快推出企业版Google+.

IE11企业模式详解,这对于企业有什么用?

- - IE浏览器中文网站
在帮助企业及时了解最新软件、服务和设备方面,Microsoft 迈出了重要一步. 今天,作为 Windows 7 和 Windows 8.1 的一项更新推出了 Internet Explorer 11 的企业模式,该模式可提供与较早版本 Internet Explorer 更好的兼容性,以及用于管理哪些 Web 应用使用该模式的工具.

企业网站建设方法论

- Outman - 月光博客
  麦肯锡并不神秘,方法论铸就神奇. 这是出现在麦肯锡系列丛书封面上非常醒目的一句广告语. 博文标题的想法正来源于此,感谢麦肯锡. 今天我们要谈论的主角并非麦肯锡,而是方法论,是建设企业网站的方法论. 正如标题说言:网站建设并不神秘,方法论铸就神奇.   伴随互联网的飞速普及,及相关建站软件的日新月异,现如今建设一个企业网站已相当容易,即使是对技术一窍不通的小白也能依靠智能软件信手拈来,所以说,科技很给力.

企业微博营销实战

- Beus - 月光博客
  做为一种社会化网络服务,微博在今年的发展非常迅猛,Twitter联合创始人伊万. 威廉姆斯透露,Twitter注册用户已达1.75亿人,而新浪也在11月份宣布,新浪微博注册用户已达5000万,可见以微博为主力的“传播方式”的革命已经到来.   曾几何时,SNS社区网络也是继博客之后众多投资者和创业者追捧的明星,然而随着微博的出现和发展,传统的SNS社区网络的发展逐渐显示出颓势,活跃用户不断下滑,发展前景越来越受到质疑,曾几何时,SNS的领队开心网靠着“偷菜”游戏火爆一时,全国网民几乎人人都加入了“偷菜”的行列,各大门户网站也纷纷复制开心模式,推出各自SNS频道,然而正当各大网站在SNS领地杀得不可开交之时,微博却突然之间异军突起.

Groupon:小企业的大平台

- Shell Wang - SocialBeta
最近,New Yorker专栏作家James Surowiecki如此表达了自己对Groupon的看法:“Groupon不会成为一个与YouTube、Facebook、Twitter和Google一样具有革命性的公司,相反其理念属于守旧派,既没有明显的技术优势,用户只不过点以下购买按钮,而且其业务需要依靠大量的注意力…”.