存档

‘云存储和计算’ 分类的存档

hadoop+hbase+zookeeper集群安装

2012年9月7日 没有评论

最近公司搭建hadoop+hbase+zookeeper集群,期间遇到了许多问题,这里和大家分享一下安装的一些经验,目的在于大家在部署hadoop集群环境中少走一些弯路:
由于刚开始的时候我用虚拟机安装,安装版本是hadoop0.20.2+hbase0.90.3+zookeeper3.3.3版[......]

Read more

分类: 云存储和计算 标签:

关于sphinx+PHP在高并发时响应性能低下的解决办法

2012年5月25日 没有评论

经过多次压力测试,发现sphinx在高并发时出现负载突然提升,并且响应速度明显下降。经过多方面的排查,发现是由于PHP与sphinx自带的searchd进行socket的连接之后,系统内存有大量的Time_Wait连接,所以我们猜测为searchd的socket连接未及时关闭,造成大量请求堆积,使得[......]

Read more

分类: 云存储和计算 标签: ,

Sphinx 0.9.9/Coreseek 3.2 参考手册

2012年5月17日 没有评论

Sphinx–强大的开源全文检索引擎,Coreseek–免费开源的中文全文检索引擎

Copyright © 2006-2010 (coreseek)nzinfo,, (coreseek)HonestQiao,, (sphinx)Andrew Aksyonoff,

本地化服务

中[......]

Read more

转:sphinx实时索引架构实现

2012年4月23日 没有评论

先说一下笔者曾经应对的情况:
每天数据更新量在几十万以上
每天PV为千万级以上
数据分布在多个数据库下,数据表相同,但更新频率有差异
根据实际情况,使用的硬件包括有多台数据库与索引服务器,索引服务器根据业务启用多个端口运行索引实例,避免单点并负载均衡。

建议环境:
数据库: 一台或多[......]

Read more

缓存算法

2012年4月21日 没有评论

没有人能说清哪种缓存算法是源于其他的缓存算法。

Least Frequently Used(LFU):

大家好,我是 LFU,我会计算为每个缓存对象计算他们被使用的频率。我会把最不常用的缓存对象踢走。

Least Recently User(LRU):

我是LRU缓存算法,我[......]

Read more

分类: 云存储和计算 标签: , ,