[转][转]Twemproxy——针对MemCached与Redis的代理

标签： | 发表时间：2013-11-14 06:28 | 作者：heiyeshuwu
出处：http://blog.csdn.net/heiyeshuwu

Twemproxy是一个代理服务器，可以通过它减少 Memcached或 Redis服务器所打开的连接数。

Twemproxy有何用途呢？它可以：

  • 通过代理的方式减少缓存服务器的连接数
  • 自动在多台缓存服务器间共享数据
  • 通过不同的策略与散列函数支持一致性散列
  • 通过配置的方式禁用失败的结点
  • 运行在多个实例上，客户端可以连接到首个可用的代理服务器
  • 支持请求的流式与批处理，因而能够降低来回的消耗

Redis的创建者 Salvatore Sanfilippo（@antirez）撰写了一篇 文章，介绍了如何通过Twemproxy在开启 Redis-cluster特性前就让Redis集群发挥作用，而在大多数情况下都不会丧失太多的性能：

Twemproxy的强大之处在于可以通过配置的方式让它禁用掉失败的结点，同时还能在一段时间后进行重试，抑或使用指定的键->服务器映射。这意味着在将Redis用作数据存储时，它可以对Redis数据集进行分片（禁用掉结点驱逐）；在将Redis用作缓存时，它可以启用结点驱逐以实现简单的高可用性。
Twemproxy速度很快，真的很快，它几乎与直接访问Redis速度一样快。我敢说在最差的情况下，性能也只不过才损失20%而已。 

我对性能问题唯一的想法是当在多个实例上使用命令时，我觉得MGET还有改进空间。

Twemproxy早在今年初由Twitter 开源，它最开始支持Memcached，最近又添加了对Redis的支持。Twitter使用了大量的缓存服务器，每分钟会发送300k的tweet；可以看看这篇介绍 Real-Time Delivery Architecture At Twitter以了解更多信息。

查看英文原文： Twemproxy – Proxy For MemCached And Redis




















source:  http://www.infoq.com/cn/news/2012/12/twemproxy


作者：heiyeshuwu 发表于2013-11-13 22:28:13 原文链接
阅读：124 评论：1 查看评论

相关 [twemproxy memcached redis] 推荐：

Twemproxy——针对MemCached与Redis的代理

- - InfoQ cn
Twemproxy是一个代理服务器，可以通过它减少 Memcached或 Redis服务器所打开的连接数. Twemproxy有何用途呢. 通过代理的方式减少缓存服务器的连接数. 自动在多台缓存服务器间共享数据. 通过不同的策略与散列函数支持一致性散列. 运行在多个实例上，客户端可以连接到首个可用的代理服务器.

[转][转]Twemproxy——针对MemCached与Redis的代理

- - heiyeluren的blog（黑夜路人的开源世界）
Twemproxy是一个代理服务器，可以通过它减少 Memcached或 Redis服务器所打开的连接数. Twemproxy有何用途呢. 通过代理的方式减少缓存服务器的连接数. 自动在多台缓存服务器间共享数据. 通过不同的策略与散列函数支持一致性散列. 通过配置的方式禁用失败的结点. 运行在多个实例上，客户端可以连接到首个可用的代理服务器.

转 redis vs memcached

- - 数据库 - ITeye博客
传统MySQL+ Memcached架构遇到的问题. 　　实际MySQL是适合进行海量数据存储的，通过Memcached将热点数据加载到cache，加速访问，很多公司都曾经使用过这样的架构，但随着业务数据量的不断增加，和访问量的持续增长，我们遇到了很多问题：. 　　1.MySQL需要不断进行拆库拆表，Memcached也需不断跟着扩容，扩容和维护工作占据大量开发时间.

Redis 代理服务Twemproxy

- - CSDN博客云计算推荐文章
      当我们有大量 Redis 或 Memcached 的时候，通常只能通过客户端的一些数据分配算法（比如一致性哈希），来实现集群存储的特性. 虽然Redis 2.6版本已经发布Redis Cluster，但还不是很成熟适用正式生产环境.  Redis 的 Cluster 方案还没有正式推出之前，我们通过 Proxy 的方式来实现集群存储.

Twemproxy – Twitter 开源的 Redis proxy

- - NoSQLFan
在去年的QCon London2012 大会上，Twitter 发表了题为 《 Timelines @ Twitter》的演讲，里面提到以 Redis作为其timeline的主要存储，目前目测全球范围内，Twitter可能是Redis的最大用户了（或者是新浪微博. 而今天我们要说的这个 Twemproxy，是 Twitter 开源出来的 Redis 和 Memcached 代理.

谈谈Memcached与Redis

- - 互联网旁观者
Memcached是以LiveJurnal旗下Danga Interactive公司的Bard Fitzpatric为首开发的高性能分布式内存缓存服务器. 其本质上就是一个内存key-value数据库，但是不支持数据的持久化，服务器关闭之后数据全部丢失. Memcached使用C语言开发，在大多数像Linux、BSD和Solaris等POSIX系统上，只要安装了libevent即可使 用.

Redis分布式中间件TwemProxy

- - 企业架构 - ITeye博客
twemproxy,也叫nutcraker. 是一个twtter开源的一个redis和memcache代理服务器. redis作为一个高效的缓存服务器，非常具有应用价值. 但是当使用比较多的时候，就希望可以通过某种方式 统一进行管理. 避免每个应用每个客户端管理连接的松散性. 搜索了不少的开源代理项目，知乎实现的python分片客户端.

基于twemproxy的redis分布式应用

- - 数据库 - ITeye博客
根据以往的测试结论，单个redis的实例的内存总量最好控制在8G以内（最大不能超过20G），而实际上应用对redis的内存的需求可能会远远大于8G，因此需要一个保持redis server性能不下降，但可以有效扩充redis server的容量的方案. twemproxy是一个恰当的选择. twemproxy,也叫nutcraker.

基于Twemproxy的Redis集群方案

- - 互联网 - ITeye博客
由于单台redis服务器的内存管理能力有限，使用过大内存redis服务器的性能急剧下降，且服务器发生故障将直接影响大面积业务. 为了获取更好的缓存性能及扩展型，我们将需要搭建redis集群来满足需求. Twemproxy是memcached和redis协议的代理服务器，并能有效减少大量连接对redis服务器的性能影响，它提供的主要特性如下:.

Redis和Memcached的区别

- - 互联网 - ITeye博客
Redis和Memcache都是将数据存放在内存中，都是内存数据库. 不过memcache还可用于缓存其他东西，例如图片、视频等等. Redis不仅仅支持简单的k/v类型的数据，同时还提供list，set，hash等数据结构的存储. 虚拟内存--Redis当物理内存用完时，可以将一些很久没用到的value 交换到磁盘.