大规模并行处理系统 Greenplum

Greenplum是一家总部位于美国加利福尼亚州，为全球大型企业用户提供新型企业级数据仓库(EDW)、企业级数据云(EDC)和商务智能(BI)提供解决方案和咨询服务的公司. Greenplum的架构采用了MPP(大规模并行处理). 在 MPP 系统中，每个 SMP 节点也可以运行自己的操作系统、数据库等.

笔者有幸从04年就开始从事大规模数据计算的相关工作，08年作为Greenplum 早期员工加入Greenplum团队（当时的工牌是“005”，哈哈），记得当时看了一眼Greenplum的 架构（嗯，就是现在大家耳熟能详的那个好多个X86框框的图），就义无反顾地加入了，转眼之间，已经到了第8个年头.

公司的一个报表业务，数据量比较大，用户使用频繁. 为了更好的用户体验，我们之前尝试过多种技术：MongoDB、ElasticSearch、Greenplum 等，但是一直没办法做到大部分查询秒级响应. 前段时间探索了很多大数据产品，无意中发现 ClickHouse，很快就被其极致的性能所吸引. 在一番实验和研究后，我们决定用 ClickHouse 解决这个历史债务.

EMC Greenplum宣布了一个新的Hadoop发行版本—— Pivotal HD，其中包含一个完全运行于HDFS之上的MPP数据库，兼容SQL，而且速度“比Hive快数百倍”. Pivotal HD支持标准Hadoop发型版本的常用特性（包括HDFS、Pig、Hive、Mahout和Map-Reduce等），但又加入了一些其他的组件，具体如下面结构图所示： .

近日，Pivotal 宣布开源大规模并行处理（MPP）数据库 Greenplum，其架构是针对大型分析型数据仓库和商业智能工作负载专门设计的. 借助 MPP 这种高性能的系统架构，Greenplum 可以将 TB 级的数据仓库负载分解，并使用所有的系统资源并行处理单个查询. Greenplum 数据库基于 PostgreSQL 开源技术.

Pivotal宣布开源大规模并行处理（MPP）数据库Greenplum，其架构是针对大型分析型数据仓库和商业智能工作负载专门设计的. 借助MPP这种高性能的系统架构，Greenplum可以将TB级的数据仓库负载分解，并使用所有的系统资源并行处理单个查询. Greenplum数据库基于PostgreSQL开源技术.

Greenplum DB 号称是世界上第一个开源的大规模并行数据仓库，最初是基于 PostgreSQL，现在已经添加了大量数据库方面的创新. Greenplum 提供 PD 级别数据量的强大和快速分析能力，特别是面向大数据方面的分析能力，支持大数据的超高性能分析查询. GreenPlum 主要特性：.

现在大数据组件非常多，众说不一，在每个企业不同的使用场景里究竟应该使用哪个引擎呢. 这是易观Spark实战营出品的开源Olap引擎测评报告，团队选取了Hive、Sparksql、Presto、Impala、Hawq、Clickhouse、Greenplum大数据查询引擎，在原生推荐配置情况下，在不同场景下做一次横向对比，供大家参考.

经常有人被我问到“你用什么浏览器”时的答案是：傲游啦360啦，但事实上，这些都不是真正的浏览器，从技术角度讲，充其量只是在IE浏览器上加一个壳罢了. 在国外，壳浏览器是以“皮肤”的形式存在，纯属为了美化浏览器而用. 但在中国，壳浏览器成了一门生意. 奇虎的主要收入来源并非来自那个由于一场商战而赫赫有名的安全卫士，而是来自于360浏览器（它有两个版本，分别以IE和Chrome为内核）.

秒杀系统架构分析与实战. （反馈非常好的文章，推荐）. （1）查询商品；（2）创建订单；（3）扣减库存；（4）更新订单；（5）付款；（6）卖家发货. （1）低廉价格；（2）大幅推广；（3）瞬时售空；（4）一般是定时上架；（5）时间短、瞬时并发量高；. 假设某网站秒杀活动只推出一件商品，预计会吸引1万人参加活动，也就说最大并发请求数是10000，秒杀系统需要面对的技术挑战有：.