MapR发布最新Hadoop发行版,承诺无风险升级

标签: 动态 大数据 Hadoop hadoop2.0 MapR | 发表时间:2014-02-18 16:46 | 作者:张霖
出处:http://www.ctocio.com

MapR近日宣布3月份将发布最新的Hadoop发行版支持Hadoop2.2 与  YARN(下一代Hadoop资源规划器),向前兼容MapReduce1.x规划器,并向用户承诺无风险升级。

在兼容性方面,MapR与竞争对手Cloudera和Hortonworks的策略明显不同,MapR始终承诺向前兼容性,使企业用户能在相同节点上同时运行Hadoop MapReduce1.x和YARN。

除了确保MapReduce1.x和YARN规划器能够共存,MapR还向MapReduce1.x用户提供了一条通往YARN的简单无风险的升级路径。

据MapR的市场总监Jack Norris介绍,MapR的关注点是Hadoop在生产环境中的应用,而在生产环境中,用户最关心的可用性、可靠性业务连续性以及与现有应用的整合。MapR之所以强调向前兼容性也是出于这种考虑。

去年10月发布的Apache Hadoop YARN是 Hadoop2.0的基础,相当于Hadoop的操作系统,将单用途的数据平台变成能够处理批处理任务的多用途平台,支持批处理、互动和在线流处理等。

YARN

YARN同时也是Hadoop分布式文件系统(HDFS)的资源管理器,使企业能够在一个地方存入数据后以多种方式并发访问数据。

通过将YARN于MapR的读写POSIX数据平台整合在一起,MapR使得基于YARN的应用不仅能够在Hadoop集群上运行并分享资源,而且也能在底层分布式文件系统和数据库表中读写和更新数据。这使得企业能够开发并部署更多的大数据应用。

YARN为Hadoop的处理模式打开了大门,不再仅仅是MapReduce, 而MapR的Hadoop发行版进一步发展了YARN,在HDFS之外增加了一个完整的标准NFS界面,使得非MapReduce应用也能利用Hadoop集群的存储能力。

相关 [mapr hadoop 发行版] 推荐:

MapR发布最新Hadoop发行版,承诺无风险升级

- - IT经理网
MapR近日宣布3月份将发布最新的Hadoop发行版支持Hadoop2.2 与  YARN(下一代Hadoop资源规划器),向前兼容MapReduce1.x规划器,并向用户承诺无风险升级. 在兼容性方面,MapR与竞争对手Cloudera和Hortonworks的策略明显不同,MapR始终承诺向前兼容性,使企业用户能在相同节点上同时运行Hadoop MapReduce1.x和YARN.

MapR初体验

- 呆瓜 - 淘宝数据平台与产品部官方博客 tbdata.org
MapR是MapR Technologies, Inc的一个产品,号称下一代Hadoop,使Hadoop变为一个速度更快、可靠性更高、更易于管理、使用更加方便的分布式计算服务和存储平台,同时性能也不断提高. 它将极大的扩大了Hadoop的使用范围和方式. 它包含了开源社区的许多流行的工具和功能,例如Hbase、Hive.

Hadoop发行版选择

- - 董的博客
Dong | 新浪微博: 西成懂 | 可以转载, 但必须以超链接形式标明文章原始出处和作者信息及 版权声明. 网址: http://dongxicheng.org/mapreduce-nextgen/hadoop-distribution-selection/. 本博客的文章集合: http://dongxicheng.org/recommend/.

Hadoop集群部署实战(cdh发行版)

- - 运维派
现就职于一家创业公司任职运维兼DBA,曾就职于猎豹移动,负责数据库团队,运维前线作者之一. 10.10.103.62             zkfc    journalNode  QuorumaPeerMain  datanode                      nodemanager.

MapR CEO对2016大数据的5个预测

- - 199IT互联网数据中心
MapR Converged Data Platform将Hadoop和Spark的强大功能与全局事件流、实时数据库能力与企业存储集成到了一起,用于开发与运行创新性的数据应用. MapR Platform由业界最快速、最可靠、安全且开放的数据基础设施所驱动,极大降低了TCO,并实现了全局的实时数据应用.

Hadoop Streaming 编程

- - 学着站在巨人的肩膀上
Hadoop Streaming是Hadoop提供的一个编程工具,它允许用户使用任何可执行文件或者脚本文件作为Mapper和Reducer,例如:. 采用shell脚本语言中的一些命令作为mapper和reducer(cat作为mapper,wc作为reducer). 本文安排如下,第二节介绍Hadoop Streaming的原理,第三节介绍Hadoop Streaming的使用方法,第四节介绍Hadoop Streaming的程序编写方法,在这一节中,用C++、C、shell脚本 和python实现了WordCount作业,第五节总结了常见的问题.

Hadoop使用(一)

- Pei - 博客园-首页原创精华区
Hadoop使用主/从(Master/Slave)架构,主要角色有NameNode,DataNode,secondary NameNode,JobTracker,TaskTracker组成. 其中NameNode,secondary NameNode,JobTracker运行在Master节点上,DataNode和TaskTracker运行在Slave节点上.

Hadoop MapReduce技巧

- - 简单文本
我在使用Hadoop编写MapReduce程序时,遇到了一些问题,通过在Google上查询资料,并结合自己对Hadoop的理解,逐一解决了这些问题. Hadoop对MapReduce中Key与Value的类型是有要求的,简单说来,这些类型必须支持Hadoop的序列化. 为了提高序列化的性能,Hadoop还为Java中常见的基本类型提供了相应地支持序列化的类型,如IntWritable,LongWritable,并为String类型提供了Text类型.

Hadoop TaskScheduler浅析

- - kouu's home
TaskScheduler,顾名思义,就是MapReduce中的任务调度器. 在MapReduce中,JobTracker接收JobClient提交的Job,将它们按InputFormat的划分以及其他相关配置,生成若干个Map和Reduce任务. 然后,当一个TaskTracker通过心跳告知JobTracker自己还有空闲的任务Slot时,JobTracker就会向其分派任务.

HADOOP安装

- - OracleDBA Blog---三少个人自留地
最近有时间看看hadoop的一些东西,而且在测试的环境上做了一些搭建的工作. 首先,安装前需要做一些准备工作. 使用一台pcserver作为测试服务器,同时使用Oracle VM VirtualBox来作为虚拟机的服务器. 新建了三个虚拟机以后,安装linux,我安装的linux的版本是redhat linux 5.4 x64版本.