• 本帖最后由 lsylsy2 于 2012-2-6 11:35 编辑 *

目标:做大量静态文件上传下载,把一台高性能服务器替换为多个廉价并且在不同机房VPS,提高性价比、安全性【做文件下载一不小心碰到什么……
文件特点:大小为10M左右,请求数相对低于图片等静态服务器;并非十分重要,丢失会对网站有影响但非致命性
初步构架:两台中心节点+若干数据节点;
中心节点运行数据库【选择未定】,两台主从热同步,主写入两台均可读;
数据节点运行Nginx+直接硬盘读取文件,守护进程与中心节点连接
数据库内容:文件标识【md5或其他编号】,所在数据节点【2~10个】,同时起到备份与负载均衡作用,由于非十分重要所以最低两节点就够;
新文件上传:随机指向某一数据节点【服务器空闲程度、与客户网络状况等考虑后实行俄罗斯轮盘算法】,上传后更新中心数据库,同时复制到其他数据节点;
文件下载:客户请求中心节点,中心节点选择数据节点【俄罗斯轮盘算法】后302跳转,客户端直接从数据节点下载
整理:客户端请求数据会在中心节点留下记录,定期【每天凌晨之类】根据文件热度增加或减少副本数量,以负载均衡/腾出空间

目前大致想法是这样,求分析有何漏洞,有什么可以改进的?
数据库感觉NoSQL架设复杂,MySQL似乎又不适合,求指点!

PS:俄罗斯轮盘算法是指,比如一台服务器a很空闲,一台服务器b比较拥堵,空闲指数2:1,那么随机分配时a有三分之二概率b有三分之一概率,防止出现所有数据都涌向a的情况

Update:文件副本增加可以依靠对高频文件的下载触发,减少则可以由数据节点扫描本机上冷门副本并向中心请求删除副本