SMP IRQ Affinity

发表于 2013 年 5 月 8 日由 chunshengster@gmail.com

感谢 @淘宝褚霸等人的大量文档。各位SA，如果你的服务器cpu使用很不均衡，top 中si的用量很大，不妨试试这个脚本。 五一前优化服务器，把smp_affinity 和 rps/rfs的内容通通看了遍，花了两天时间写了个自动配置的脚本，在github上：http://t.cn/zTQ5HRW ，欢迎抓虫。

Scaling in the Linux Networking Stack:
http://www.mjmwired.net/kernel/Documentation/networking/scaling.txt
SMP IRQ Affinity: 
https://cs.uwaterloo.ca/~brecht/servers/apic/SMP-affinity.txt
linux kernel 2.6.35中RFS特性详解:
http://www.pagefault.info/?p=115 
Linux 多核下绑定硬件中断到不同 CPU（IRQ Affinity）:
http://www.vpsee.com/2010/07/load-balancing-with-irq-smp-affinity/
计算 SMP IRQ Affinity : 
http://www.vpsee.com/2010/07/smp-irq-affinity/
Linux SMP IRQ Affinity:
http://www.igigo.net/archives/231
Linux内核 RPS/RFS功能详细测试分析:
http://www.igigo.net/archives/204 
rfs: Receive Flow Steering : 
http://lwn.net/Articles/381955/ 
rps: Receive packet steering:
http://lwn.net/Articles/361440/ 
Receive Packet Steering :
http://lwn.net/Articles/331582/ 
Software receive packet steering : 
http://lwn.net/Articles/328339/ 
MYSQL数据库网卡软中断不平衡问题及解决方案 ： 
http://blog.yufeng.info/archives/2037
SMP affinity and proper interrupt handling in Linux
http://www.alexonlinux.com/smp-affinity-and-proper-
interrupt-handling-in-linux
Why interrupt affinity with multiple cores is not 
such a good thing
http://www.alexonlinux.com/why-interrupt-affinity-
with-multiple-cores-is-not-such-a-good-thing

183 total views, 30 views today

经典存储架构 Haystack GFS TFS

发表于 2013 年 5 月 2 日由 chunshengster@gmail.com

经典论文翻译导读之《Finding a needle in Haystack: Facebook’s photo storage》 http://www.importnew.com/3292.html

优酷网视频存储架构 http://blog.csdn.net/starxu85/article/details/5673029

经典论文翻译导读之《Google File System》 http://www.importnew.com/3491.html

淘宝CDN、TFS的介绍:

http://www.infoq.com/cn/presentations/zws-taobao-image-store-cdn

http://tfs.taobao.org/index.html

60 total views, 25 views today

varnish 503 “ Could not get storage”的一个解决方案

发表于 2013 年 4 月 28 日由 chunshengster@gmail.com

五一高峰，临时帮同事调varnish 503错误，通过“varnishlog -d -c -m TxStatus:503”看到问题所在“ FetchError c Could not get storage”，通过 varnishadm 调整“param.set nuke_limit 512”，503问题立解。没有仔细研究过varnish的更多资料，临时记录。

几条用到的命令：

varnishadm -S /etc/varnish/secret -T 127.0.0.1:6082

param.set nuke_limit 512

param.show nuke_limit

watch -n 5 ‘varnishlog -d -c -m TxStatus:503′

varnishncsa |awk ‘$9 ~ 50′

参考资料：

1,varnish源码，github

2,http://useranswer.com/answer/varnish-returning-503-fetcherror-could-not-get-storage/

3,https://www.varnish-cache.org/trac/ticket/1012

4,http://serverfault.com/questions/372584/varnish-returning-503-fetcherror-could-not-get-storage

5,https://www.varnish-cache.org/forum/topic/530