redis读写性能测试

q789321

一、基础测试：
     redis读写性能测试redis官网测试读写能到10万左右，非常吸引人，我在研发环境对redis进行测试，发现redis的速度的确很快，此测试是为日后应用优化提供研发参考。由于受到网络环境的限制，本机是100M的网卡，最高10M/s的传输速度，所以当测试到每秒读取45000条时，测试机和测试服务器上传或者下载速度已经达到10M/s，基本到了网络瓶颈，无法再提高，这个应该是网络吞吐量的原因，不过CPU的利用率直到20%左右。如果网络传输速度更快的话，应该还可以提高，另外，在不进行批量获取数据的时候，也就是每次发送一个key获取一个值的方式处理，基本处理能力只在1100条左右，估计是受制于网络速度的原因。
   二、 加项测试：
    （1）单条处理：
    通过同一网段的两台Xeon(R) E5520 服务器之间进行测试，网络速度也是10M/s的速度，通过发送一个key获取一个value的方式测试，速度明细要高于开发电脑的速度，也就是linux环境快于window环境，每秒能处理4000条左右的数据，比之前1000条提高4倍，而在服务器本机进行测试，性能突然开始变态了，存储数据达到1.5万左右，获取速度达到2万左右，比网络环境提供5倍，比windows环境提高20倍；
    （2） 批量处理：
    批量存储、批量获取，linux服务器直接处理速度在4万以上，与windows环境下速度相当；不过在本机环境下，性能又开始变态了，批量存储速度能达到15万到20万以上，批量获取更是达到40万以上，整体性能比Linux服务器直接提高10倍到20倍。

    三、个人经验：
    （1）批量处理：
        redis在处理数据时，最好是要进行批量处理，将一次处理1条数据改为多条，性能可以成倍提高。测试的目的就是要弄清楚批量和非批量处理之间的差别，从测试结果来看，性能差异非常大，所以在开发过程中尽量使用批量处理，即每次发送多条数据，以抵消网络速度影响。

    （2）网络：
       redis在处理时受网络影响非常大，所以，部署最好能在本机部署，如果本机部署redis，能获取10到20倍的性能。集群情况下，网络硬件、网速要求一定要高。
      
    （3）内存：
       由于我在测试环境遇到过redis读取超时，排查原因定位在Linux交互分区上。如果没有足够内存，linux可能将reids一部分数据放到交换分区，导致读取速度非常慢导致超时。所以一定要预留足够多的内存供redis使用。

具体测试内容如下：
   
测试环境：
redis主机:
    Red Hat Enterprise Linux Server release 5.4 (Tikanga)
    Intel(R) Xeon(R) CPU           E5520  @ 2.27GHz
    内存 8G
    硬盘 300G
测试主机：
    window7
    eclipse  Juno Service Release 2
    cpu i3 -2100
    内存 4G
     硬盘500G
  java连接redis客户端jedis-2.1.0.jar
测试数据：
   512个字符字符串
测试结果：

批量获取


非批量提交处理数量



批量设置



非批量设置




内网服务器直接数据处理






服务器本机上测试