admin 发表于 2012-8-14 12:02:49

系统虚拟盘2100版本单服带288台客户机【SATA2方案】

7月23日更新回复朋友们的问题啊:

先回复10楼死性大哥的问题啊

固态硬盘2010年做锐起无盘时用过,当时买的是威刚40G的,买了12块,3块放系统镜像,9块做回写盘,当时那家网吧新开160台机子,全场2G内存,用了3台服务器带,刚开始测试,一台服务器就能带起全场,确实感觉固态硬盘很牛,不过网吧运行了近2个月,客户机开始变得非常卡,完后做回写的固态硬盘陆续出现故障,速度慢,写入数据卡死等,但是系统镜像盘一点问题没有,最后把回写盘拿去商家返厂修理,半个月后被告知写入寿命已到上限,不属于产品故障,不予保修,直接给退回来了,当时确实郁闷坏了,拿去收二手的去卖,别人一检测有问题,直接就说不收,要收可以最多30块....9块SSD当时也万把元呢,才2个多月就这样打水漂了,确实郁闷,最后无奈全部上成希捷73G 15K转的SAS盘了,此后再不考虑固态硬盘做回写,最多做游戏盘或系统盘。

另外今年4月份,看新闻Intel要推出910系列的固态硬盘,号称写入寿命能达到原先其他系列产品的30倍,以下是原文地址,希望都看下http://news.watchstor.com/new-products-137349.htm

我重点截取原文中此段话语:
英特尔固态硬盘910系列具有更高的存储性能、耐用性和可靠性,可全面满足当今数据中心对高性能应用的需求。它采用了英特尔高耐用性技术和优化的多层单元(MLC)25 纳米 NAND 闪存,可支持在 5 年内每天对硬盘完全写入多至 10 次,与基于 MLC 的标准闪存产品相比将耐用性提高了 30 倍*,从而提供了一款经济高效的存储解决方案。

http://bbs.icafe8.com/data/attachment/forum/201207/23/144839p1rngbbvuqwpduup.jpg
这是7月23号星期一早上8点重启服务器后至下午2点的服务器状态(本网吧每周1和周5早上8点准时重启所有服务器),运行6小时,回写总量171G,网吧每天的高峰期都在下午4点至凌晨1点左右,基本在线人数都是250人左右,不论周末还是平时,录制的视频中也有服务器运行13小时的回写总量500G,本网吧每天的回写总量基本在1TB左右,主要一半的客户机还都是2GB内存,如果全场4GB,我相信回写量会大幅降低。

按Intel官方这个说法来推算下Intel其他系列产品的写入寿命,就按80G的Intel G3 320 SSD来算,本网吧一天的回写量大概是1TB左右(视频中有服务器运行13小时的回写总量500G左右),80G(固态硬盘容量)x10(每天完全重复擦写10次) x5(年数)x365(一年天数)/30(倍数)/1024GB(网吧一天回写量)=47.5,这个数值就相当于如果本网吧的每日回写情况用一块Intel 80G的固态硬盘的寿命,就是47.5天,当然,不可能只用1块SSD做回写,就拿本网吧三台无盘服务器来算,一台服务器用3块80G固态做回写,总共就是9块,9x47.5=427.5天,意思就是本网吧如果用9块SSD做回写,那么427.5天后,也就是13个月多,全部固态回写硬盘擦写寿命用尽,也就等于报废,那么13个月光回写盘的维护成本便是1299x9=11691元钱,和HDD机械硬盘每年1000元全部换新的维护成本高出了11倍多,当然,这都只是理论数据,至于是否能像Intel说的达到他们声称的理论写入量,那无从验证,毕竟到现在为止我还没有见过谁拿出自己网吧SSD回写方案稳定无故障不卡机速度不减慢1年以上的真实案例,所以我也不敢贸然尝试,因为2010年的代价太惨痛了,HDD方案做回写毕竟施工了很多网吧,也运行了这么多年了,一直很稳定,而且速度也不慢,性价比还高,维护成本低,所以至今还在采用HDD方案,但也并不是说SSD方案不好,只是个人感觉SSD回写方案现在还没到时机,也许再过2年,工艺提升到14nm,固态硬盘的容量大幅提升,固件及配套优化软件也大幅提升,写入寿命大增,那时,才是SSD方案做回写的春天。(以上只是本人观点,仅供参考,如有其它观点,可共同探讨啊,呵呵)

至于机械硬盘的回收价格高,不是因为泰国洪水所致,而是和市场价格一直以来都成正比的,我文中写的很清楚2011年换回写盘时,当时500G新硬盘240元/块,2010年的250G老硬盘一块还卖了180元,这是何等的差距啊,就等于用了1年的250G旧硬盘换新的500G硬盘一块只用加60元钱...

另外硬盘划分扇区问题,我记得很早前看过一篇硬盘的详细解析文章,忘了是当时在哪本书上看到的还是在网上,搜了半天也没搜到,大致意思就是硬盘分区是从最内圈,也就是半径最小的盘片中心开始划分扇区空间,按这个理论来说,我给500G划分100G的空间,硬盘等于所有的数据只在硬盘盘片的最中间部分保存,以进行读写,这样所有数据所保存的数据都很集中,磁头只会在这一小部分的半径中移动读写数据,但如果是全盘划分扇区,就可能导致所有盘面的每个区域都有零散数据保存,那硬盘磁头不就要在整个盘片的半径中移动进行读写了吗,我不知道我表达的怎么样,个人根据当年看的那篇文章来定义这样的回写盘划分优势,另外,即使排除这种优势不说,那坏道问题优势绝对是存在的。


=================================华丽的分割线==================================


以下回复12楼 小疯子 和 14楼 powerair 两位朋友的问题啊

本网吧全场都是千兆电口方案(其实看我机房的图片就能看出来啊 纯电口方案)

主交换:D-Link DGS-3100-48 (48口电口二层网管型交换机 背板速率116Gbps 包转发率86.31Mpps 价格当时应该在8000元左右)

子交换:D-Likn DGS-1024T (24口电口傻瓜式交换机当时一台应该650元左右吧)

网线:金浪6类千兆网线(一箱305米,2年半前当时貌似一箱500多,这两年铜价猛涨啊,现在貌似一箱800元左右)

游戏虚拟盘和系统虚拟盘CPU 内存 主板 配置相同,CPU其实上G630就够了,能省900元,当时为了清一色22nm,So....(有点小奢侈),内存依然为32GB,硬盘1块ST500DM002做2003系统,两块ST1000DM003放游戏,当时由于2碟装的希捷2TB硬盘没出,2TB当时都是3碟装的,为了性能就选择了2块单碟装的1TB硬盘(型号ST1000DM003),现在2碟装的希捷2TB硬盘出来了,上一块这个就行,就又能省去500元大洋,整机价位应该在3000多元。
http://bbs.icafe8.com/data/attachment/forum/201207/23/0122261he57ctto7rfzkx7.jpg

另外说下如何鉴别 旧版3碟装希捷2TB硬盘和新版2碟装希捷2TB硬盘,因为型号都是ST2000DM001,所以从型号上无法鉴别,只能从外观上:
http://bbs.icafe8.com/data/attachment/forum/201207/23/013428gt50k3zof3kko11g.jpg
                              新款2碟装希捷2TB硬盘
http://bbs.icafe8.com/data/attachment/forum/201207/23/013943oeengngksys7uus1.jpg
                老款3碟装希捷2TB硬盘




新款2碟装的希捷2TB硬盘在它的正面右上角的位置,有一个大坑口,而老款3碟装希捷2TB硬盘没有






=================================华丽的分割线==================================

以下为原文:

http://bbs.icafe8.com/data/attachment/forum/201206/06/204331ntfpnqa71mfpqmef.jpg


http://bbs.icafe8.com/data/attachment/forum/201206/06/204331cw1dooco2wclzg2e.jpg


http://bbs.icafe8.com/data/attachment/forum/201206/06/225405rn4n9xrn7ijcjhjz.jpg


http://bbs.icafe8.com/data/attachment/forum/201206/06/230153xa5hzf88fkcfkg8l.jpg


http://bbs.icafe8.com/data/attachment/forum/201206/06/225405255sxk5rwd9gmkhw.jpg


服务器配置:

CPU:i5 3450价格:1130元
优势:Intel最新22nm 3D晶体管工艺 Ivy 架构的 CPU,发热量低,功耗低,性能比以前的2D晶体管工艺CPU各方面都强很多。
备注(其实个人感觉所有无盘对CPU的要求都非常低,其实CPU不用上这么高的,上i3 2100 都绝对够用,价格:660元,这样就可以节省尽500元,不过当时为了感受22nm的低功耗及所谓的3D晶体管技术,就选了这款...不过也许时间久了剩出来的电费能弥补上去...呵呵...)

内存:金邦 25nm工艺 DDR3-1600 默认电压1.5V的 8G单根内存 4根 =32GB价格:320元/根
优势:金士顿的包括其他一些品牌还都是40nm的老工艺,要达到DDR3-1600这个频率,都是从1333超频上去的,默认电压都从1.5V加压到1.65V了,增加了耗电量及发热量,稳定性也有所下降,So...这款金邦25nm工艺原生1600频率的内存优势没什么说的...价格也不贵。

主板:华硕P8H77-M   H77芯片组的 价格:780元
优势:全固态电容,全封闭式电感,6相供电,各种扩展接口及外置接口丰富,板载的Realtek 8111F千兆网卡(想必做过多种无盘产品的都知道Realtek网卡对所有无盘的兼容性及速度都是最佳的,Nvidia的nForce网卡是最头疼的,包括有盘刻盘也是),UEFI BIOS,H77芯片组有两个SATA3.0接口,另外华佗品牌的做工及质量保证了做服务器主板的稳定性。
(备注:主板硬盘模式 AHCI   原生队列NCQ开启4KB已对齐)

网卡:Intel 82574L 的千兆网卡 2块价格:130元/块网卡参数按照本论坛网卡设置参数设置 该关的关网卡驱动Intel 17.1
优势:Intel 82574L 的千兆网卡,很多服务器主板上板载的网卡,稳定性毋庸置疑。
(备注:个人一直觉得板载网卡稳定性比独立网卡好的多,再加上比较钟爱Realtek网卡对各种无盘软件的兼容稳定性及速度,所以最终决定一个网卡用主板自带的Realtek 8111F,另一块上这个Intel 82574的独立网卡做分流,刚好对比观测两块不容网卡的性能差异,多余的做备用。)

Raid卡:LSI 9211-8i价格:650元
优势:8口全SAS2 6Gb(兼容SATA3.0 6Gb)接口,533MHz的PowerPC 440处理器,PCI Express 2.0接口,总共可以提供4800MB/s的单向带宽和9600MB/s的双向带宽,26.6万的IOps。
(备注:不做Raid 只当单盘连接用)

系统镜像盘:Intel SSD 520 60GB 价格:690元
优势:Sandforce2281的主控,最新25nm的工艺,性能及稳定性毋庸置疑。

回写盘:希捷ST500DM002 8块 价格:当时购买价格390元/块 现价由于前段时间泰国又发洪水,导致又上涨到430元左右/块
优势:希捷最新工艺 单碟单面 500G SATA3.0硬盘,功耗低,垂直记录密度高,速度自然快,由于单碟单面,发热量及功耗也低。

备注:我想很多朋友看到此处都会有很大争议,为什么不用SSD固态硬盘做回写,而用普通HDD机械硬盘做回写,这里我要详细说下用机械硬盘做回写对比固态硬盘的N多优势:

1.由于现在的固态硬盘基本上都是MLC多层单元内存颗粒,成本低,容量大,但是擦写寿命不高,所以只适合做系统镜像或游戏盘,因为基本上都是读取,不影响硬盘寿命及性能,如果做回写盘的话,每天大量的擦写数据,我想不出半年,基本固态硬盘就会达到写入量极限,不废性能也差不多降的非常多了,而且固态硬盘厂家的固件设计是前2个月基本不限制你每天的写入量,所以大家刚开始用固态硬盘都觉得速度非常HIGH,但是当写入量达到极限的50%或使用时间达到2个月以上时,厂家为了硬盘不在很短的时间内就报废,所以开始限制每天的写入量,这也就是为什么很多朋友用MLC颗粒的固态硬盘做回写几个月后出现客户机不定时顿卡或速度很慢的现象,但是机械硬盘就不会。

2.固态硬盘写入寿命达到极限时就报废了,就算不报废速度也会大幅度降低,也无法修,这属于产品寿命使用耗尽,厂家是不会给予质保的,大家不可能每一两个季度换一批固态回写盘吧,给自己维护增加了负担不说,对网吧的成本也有提升,几个月建议网吧老板重新买批固态硬盘,想必网吧老板也不能接受吧,不换带来的后果就是网吧客户机速度明显降低,可能会出现卡顿现象,想必网吧老板给你电话让解决速度慢或卡的问题时,也不可能放任不管吧...

3.机械硬盘最大的优势就是现在回收价格非常高,2011年网吧无盘服务器当时买的回写盘是希捷ST3500413AS 单碟双面的,当时240元/块,用了1年,今年4月底全部服务器换新回写盘,希捷ST500DM002当时新的价格390元/块,二手回收的收我们用了1年多的希捷ST3500413AS老硬盘,一块330元收购,等于说用了1年多的老硬盘卖了一块还赚了90元,全部服务器换新的硬盘每块还赚到30元,呵呵,这个就不说了,因为泰国洪水导致的差价,最主要的是现在市场上机械硬盘回收的价格和当天市场新硬盘的价格相差非常小,记得2011年换回写盘时当时500G新硬盘240元/块,2010年的250G老硬盘一块还卖了180元,所以我给网吧老板的建议就是,每年所有无盘服务器回写盘换一次新的,因为回写盘的使用率是最高的,虽然说是回写盘,但是懂无盘原理的都知道客户机回写到回写盘的数据,它需要读取时依然是从回写盘读取的,所以说回写盘它每天既要大容量的写入数据又要读取数据,它的使用率是最高的,性能衰减也是最快的,对客户机速度的影响也是至关重要的,回写盘一旦性能降低,那直接影响的就是客户机的运行速度,所以每年更换1次回写盘,这样所有回写盘的速度都会明显提升,每次换完后顾客都觉得客户机像升级了一样,很多不懂的顾客还以为重做新系统了,都说速度比以前快多了,这就是优势,拿300台网吧的案例来说,2-3台无盘服务器,一台服务器算6-8块回写盘,每年换新的费用投入也就1000元左右,但是带来的效果提升是非常明显的,也减少了网吧服务器回写盘出故障的几率,对维护人员的维护力度也大大减小,这样的优势我想固态硬盘是绝对不能比的吧!(备注:固态硬盘如果擦写寿命用尽,厂家不予保修更换,更别提二手贩子收购了。)

4.很多网友可能会说那回写盘就买SLC单层单元的固态硬盘啊,SLC颗粒的固态硬盘大品牌基本都没有,都是一些国产或台湾的厂商做SLC颗粒的固态硬盘,性能及稳定性有待考察,科美Pluto SV 2(100GB)这款号称拯救网吧无盘界的SLC固态硬盘,因为没用过,不敢乱评论,所谓的日均写入1TB 可使用30年,这个也不加评论,但单看使用的主控就感觉所说的有些夸张,抛开这些不说,单看价格,3600元/块,够买10块HDD硬盘了,我想这1块SLC固态硬盘做回写的性能肯定抵不过10块HDD硬盘吧,安全及稳定性也没有保障,再者,就算这固态硬盘再牛,使用半年到1年后性能会衰减到何等程度呢?成本这么高的不可能每年把全部回写盘换次新的吧。

5.用机械硬盘还有一大优势就是容量大,可能网友们要说回写盘要的是速度,回写内容会在客户机重启时删除,本身容量就占不了多少,要那么大干嘛呢?那我就来讲讲硬盘容量大的优势吧,细心的朋友看到回写盘的空间划分了吗,没错500G的硬盘每块都只划分100G来做回写,磁头扫描的范围也只有整张盘片的1/5,提升读写的延迟时间,也减少磁头的摆动距离,减少工作量,以提高硬盘的寿命,再者如果划分的这100G扇区中出现坏道,可以直接在未使用的剩余空间里给此磁盘再划分出来一部分新的磁盘空间做这个盘的回写空间,直接屏蔽坏道,这就是大容量硬盘的优势,这点固态硬盘是绝对无法比拟的。我一般都是将硬盘每一个季度重新划分新的分区做回写,基本上硬盘不出坏道的情况下,1年划分4次划分完后,卖掉旧硬盘换新硬盘,基本上没发现过回写盘出现故障的,大大降低了我的维护量,也大大减少了网吧无盘服务器的故障率。
http://bbs.icafe8.com/data/attachment/forum/201207/21/163818hxnth4ncwt2nmgcz.jpg

6.很多网友肯定要提出疑问,那市场这么多高价回收二手机械硬盘做翻新盘的,就不怕买到二手翻新机械硬盘吗?这个顾虑可以完全打消,每年硬盘厂家都会出新产品,也许容量不变,但是主控或者工艺会变,型号会变,例如2010年的500G 单碟双面的希捷硬盘型号是ST3500418AS,SATA2.0接口的,2011年的500G型号是ST3500413AS,虽然也是单碟双面,但是接口换成SATA3.0了,今年2012年最新的希捷500G硬盘是单碟单面的,型号是ST500DM002,所以切忌买硬盘时不要光看容量,一定要看型号,挑最新型号最新固件的硬盘买,回来拿软件检测硬盘型号及固件以及磁盘数,接口类型,磁头数等这些参数,这些参数是无法翻新造假的!So...还用担心买到二手翻新硬盘吗?

7.剩下就是可能网友会说机械硬盘的功耗比固态硬盘高的多,看下下面希捷官方的硬盘功耗数据
http://bbs.icafe8.com/data/attachment/forum/201110/27/221208pptfj11zpu7s6p03.gif
由上图可看出,2010年工艺的,希捷ST3500418AS 单碟双面的老硬盘最大功耗也不高于8W,最新的单碟单面希捷500G ST500DM002硬盘功耗也就5W左右,固态硬盘一般的功耗就是3W左右,就拿20块希捷500G回写盘1年24小时365天一直满负荷功耗来计算,1年也才多耗费350度电,按现在商业用电1.29元/度来算,1年也不过比固态硬盘多支出451元的电费而已。

以上就是HDD硬盘对比SSD硬盘的各种优势。

最后总结下整体服务器的优势:
硬件配置由于是普通家用DIY配件,商场随处都可以买到,无需订货,价格便宜,性能强劲(后面有网吧现场视频实测),后期服务器硬件维护成本非常低(上面的HDD硬盘优势第3条和第5条说的很清楚了)。

总之一句话,性价比巨高!


http://bbs.icafe8.com/data/attachment/forum/201207/21/17145777421zd21p74926g.jpg

http://bbs.icafe8.com/data/attachment/forum/201207/21/171458u8wix9zmauuw9r4q.jpg

http://bbs.icafe8.com/data/attachment/forum/201207/21/171456zbj29jitcb0jtmsi.jpg




以下是昨晚录制视频前网吧拍的照片,拍的不好,请见谅啊,另外吐槽下这家网吧的机房,这么大的网吧,机房那么小,二手空调不给力,空调水还要每过一段时间倒一次,不然服务器就面临着水灾的可能性...那个破架子更是简陋,晃动的厉害,以前无盘服务器放最上方,桌子太不稳,每次要检查服务器搬个服务器下来能把人愁死,要搭折叠梯子,而且架子晃动的厉害,严重影响了其他运行中服务器硬盘的安全性...最终决定重要服务器放在桌子下面,桌子上的都是电影,网监,文化的那些服务器。
http://bbs.icafe8.com/data/attachment/forum/201207/21/173421ll4lmzzmlm4swvqe.jpg
http://bbs.icafe8.com/data/attachment/forum/201207/21/1734230z6g0hn0kv60fg0k.jpg
http://bbs.icafe8.com/data/attachment/forum/201207/21/173425awvmjpwc03wcvvfa.jpg
http://bbs.icafe8.com/data/attachment/forum/201207/21/173426g4n5uzcke5enngog.jpg
http://bbs.icafe8.com/data/attachment/forum/201207/21/1734293ik5tw0iigywy58t.jpg
http://bbs.icafe8.com/data/attachment/forum/201207/21/1734312vdt121huvs8q8rw.jpg
http://bbs.icafe8.com/data/attachment/forum/201207/21/173432a00bj0zar8vavza0.jpg
http://bbs.icafe8.com/data/attachment/forum/201207/21/173433tqi9dodcodhot9tt.jpg
http://bbs.icafe8.com/data/attachment/forum/201207/21/1745317iwe002k9r11kree.jpg
http://bbs.icafe8.com/data/attachment/forum/201207/21/173437oeqfzbeeuodb4oen.jpg
http://bbs.icafe8.com/data/attachment/forum/201207/21/173438cwqu11mcy6017t3q.jpg
http://bbs.icafe8.com/data/attachment/forum/201207/21/1734407w6ogcee677eie3e.jpg
左下角最大的三台塔式服务器机箱就是三台无盘服务器。



最后是星期5晚上录制的网吧非专业普通DIY服务器单服带机量视频,全场的机子都是2年半前的老机子,CPU都是X2 215,主板都是翔升GF8200,显卡一半是96SP的9600GSO,一半9800GT,全场客户机之前都是DDR2 800 2G内存,今年一半的机子都升级到4G内存(2代内存贵啊,1根DDR2 800 2G的价钱能买尽2根DDR3 1333 4G的内存了)

网吧现场录制视频地址:http://v.youku.com/v_show/id_XNDI5OTM3MDY4.html (精心录制,请各位大侠看下,支持下小弟啊{:soso_e154:})

视频中可以看到这网吧2年半前的老机子,2G内存的,在单服务器带全场的情况下,进入系统只需滚动2圈,还有首次载入CF和LOL游戏的时间,现场验证查看无盘服务器状态等,详情请仔细看视频啊(视频中有小生的亲情解说,讲的不好,请见谅啊{:soso_e106:})


结尾说下无盘2100版本的感受,之前用2000版本,相同的服务器,带到160台时下面客户机已经开始大卡,全场N多砸键盘砸鼠标喊网管的,换成2100版本后带机量提升巨大啊,可见2100版本的服务端回写缓存策略优化,提升带机性能确实不是盖的!非常强大!
最后,祝顺网越做越好啊!{:soso__5462389604067913156_1:}

92799 发表于 2012-8-14 13:12:00

本帖最后由 92799 于 2012-8-14 13:31 编辑

决对支持升级!哈哈

gdwlra 发表于 2012-8-14 13:14:20

看完了这篇文章,对老机子的优化方面做得不错,必须得支持下,网维无盘

heleijcwb 发表于 2012-8-14 14:15:35

必须得支持下,网维无盘
页: [1]
查看完整版本: 系统虚拟盘2100版本单服带288台客户机【SATA2方案】