具体这些持久化引擎之间的区别可以自行查找资料学习。Twemproxy是一个Redis/Memcached代理中间件，可以实现诸如分片逻辑、HashTag、减少连接数等功能；尤其在有大量应用服务器的场景下Twemproxy的角色就凸显了，能有效减少连接数。m

Redis虽然可以实现持久化存储，也是基于数据内存模型的基础之上，单机内存大小限制着Redis存储的数据量，有没有一种替代方案呢？本文介绍一款笔者使用的采用New BSD License 许可协议的软件——SSDB。SSDB 是一个 C/C++ 语言开发的

Redis虽然可以实现持久化存储，也是基于数据内存模型的基础之上，单机内存大小限制着Redis存储的数据量，有没有一种替代方案呢？本文介绍一款笔者使用的采用New BSD License 许可协议的软件——SSDB。SSDB 是一个 C/C++ 语言开发的

在公司做分布式深网爬虫，搭建了一套稳定的代理池服务，为上千个爬虫提供有效的代理，保证各个爬虫拿到的都是对应网站有效的代理IP，从而保证爬虫快速稳定的运行，当然在公司做的东西不能开源出来。不过呢，闲暇时间手痒，所以就想利用一些免费的资源搞一个简单的代理池服务

爬虫代理IP池在公司做分布式深网爬虫，搭建了一套稳定的代理池服务，为上千个爬虫提供有效的代理，保证各个爬虫拿到的都是对应网站有效的代理IP，从而保证爬虫快速稳定的运行，当然在公司做的东西不能开源出来。不过呢，闲暇时间手痒，所以就想利用一些免费的资源搞一个简

在公司做分布式深网爬虫，搭建了一套稳定的代理池服务，为上千个爬虫提供有效的代理，保证各个爬虫拿到的都是对应网站有效的代理IP，从而保证爬虫快速稳定的运行，当然在公司做的东西不能开源出来。不过呢，闲暇时间手痒，所以就想利用一些免费的资源搞一个简单的代理池服务

在公司做分布式深网爬虫，搭建了一套稳定的代理池服务，为上千个爬虫提供有效的代理，保证各个爬虫拿到的都是对应网站有效的代理IP，从而保证爬虫快速稳定的运行，当然在公司做的东西不能开源出来。不过呢，闲暇时间手痒，所以就想利用一些免费的资源搞一个简单的代理池服务

chmod a+wrx /etc/init.d/ssdb3.$ service ssdb start 就可以启动ssdb了打印出ssdb 1.8.0Copyright 2012-2014 ssdb.io. ssdb started.则证明启动成功。'h'

在公司做分布式深网爬虫，搭建了一套稳定的代理池服务，为上千个爬虫提供有效的代理，保证各个爬虫拿到的都是对应网站有效的代理IP，从而保证爬虫快速稳定的运行，当然在公司做的东西不能开源出来。不过呢，闲暇时间手痒，所以就想利用一些免费的资源搞一个简单的代理池服务

redis与ssdb在某些场景很适合使用，比如某些数据在数据库中只能残留2分钟，类似YY频道T人，固定几分钟后才能进来，就可以使用setex key seconds value命令，之后判断是否过期可以通过exists key 命令。在搭ssdb前说red

Redis与Ssdb在某些场景很适合使用，比如某些数据在数据库中只能残留2分钟，类似YY频道T人，固定几分钟后才能进来，就可以使用setex key seconds value命令，之后判断是否过期可以通过exists key 命令。所以自己也去下载了ss

另外，rocksdb是FB在LevelDB的二次开发版本，因此也存在使用RocksDB作为存储引擎的SSDB版本，可以参考这里。# to identify a master even if it moved. SSDB命令与Redis类似，SSDB也支持多

在公司做分布式深网爬虫，搭建了一套稳定的代理池服务，为上千个爬虫提供有效的代理，保证各个爬虫拿到的都是对应网站有效的代理IP，从而保证爬虫快速稳定的运行，当然在公司做的东西不能开源出来。不过呢，闲暇时间手痒，所以就想利用一些免费的资源搞一个简单的代理池服务

所有的配置文件都在 /etc/nginx下；启动程序文件在 /usr/sbin/nginx下；日志文件在 /var/log/nginx/下，分别是access.log和error.log；然后能通过浏览器访问到 http://localhost/, 一切正