创业公司,生产环境,按软件负载,买几十台二手服务器,可用性如何

2017-07-25 17:42:52 +08:00
 a251922581
也就几个机柜的量吧,算下来几十台服务器,大机房里淘汰下来的服务器,DELL R710、HP DL380 G7 这类的 2U Xeon 56xx 系列的,配置 Xeon X5650 *2, 8G DDR3 REG * 18 = 144G, 硬盘按需要买固态和 SAS 盘。
软件的话反正 MySQL 之类的都可以做主从之类的高可用配置,挂了也没事。。就是虚拟机跑的挺多,都跑了线上业务,服务器老挂掉重启的话。。
用过零星几台二手服务器,稳定性还不错,家里公司里放的都有。。主要图的是便宜,都买二手的,每年坏掉 10%算下来都便宜。。
11896 次点击
所在节点    Linux
117 条回复
msg7086
2017-07-26 10:27:49 +08:00
@lianxiaoyi 不过你们这种挣得多的业务,买服务器基本不用考虑成本的话,云还是非常合适的。该不该自购服务器还是要看经济情况和业务情况来定。我司是很明显的不适合用云的场景,所以二手服务器的经验比较多。
pubby
2017-07-26 10:29:01 +08:00
一直买的二手服务器托管,没毛病。硬盘另外买新的企业级。

放办公室的话建议买较新的型号,要不然夏天高温就等着不断死机吧
scys
2017-07-26 10:44:28 +08:00
二手服务器硬件运维没啥的,就是坏了扔。
数据备份好就行,而且二手服务器坏了,里面是新硬盘,直接抽出来放到另外一个机架就行,运维成本就是丢给机房操作罢了,托管费贵点,其实没多少。
可是看到楼主提到放在公司,不怕,我用二手和新硬盘混着两年,都硬盘坏了几个,用 RAID 的,坏了就换一个上去,操作下指令,很好恢复。

放公司,真心随意。
还可以外加买个空调对着吹。便宜空调很便宜的,比一台二手服务器还便宜。
zpf124
2017-07-26 10:51:12 +08:00
@msg7086 按道理除了 openVZ 外 其他架构下,除非商家故意卖出超过上限的配额,否则不会出现超售吧?
iyangyuan
2017-07-26 11:03:40 +08:00
勇气可嘉
idblife
2017-07-26 11:04:55 +08:00
何必呢
直接上云吧
lianxiaoyi
2017-07-26 11:28:14 +08:00
@msg7086 我感觉自建服务器就是很麻烦。很多运维工作要做。特别是图表,报警等信息,还有镜像乱七八糟的。。。我其实是 php 开发,然手顺手兼职了公司服务器维护与部署 。。。。
winglight2016
2017-07-26 12:17:54 +08:00
@msg7086 我说攒一台就是指普通 pc,公司内部使用无需和机房配置看齐,外网运营服务器还是用云平台的比较省
mhycy
2017-07-26 12:31:15 +08:00
@msg7086 我说的就是二手货,只是比 56XX 高端点。。。56XX 单线程太差了,某些应用并不合适
msg7086
2017-07-26 12:48:38 +08:00
@zpf124 讲道理,我还没见过百分之百不超兽的商家。
故意卖出超过上限的配额?别闹了,哪个商家不会故意卖出超过上限的,否则都要倒闭了。

比如 CPU,一台双路 E5 2680v3,24 核 48 线,拿来卖 VPS 你觉得可能只卖出 48 个 1 核心机器吗?
5000 刀的机器成本你觉得 1 核心 VPS 得卖多少钱一个月才能回本。(我们先不谈 1 线程只是半个核心的问题。)
平均每个 VPS 成本是 100 刀,一台服务器用 5 年来算,每年要收 20 刀的机器成本。
这还没算客服、电费、网费、房价、坏件返修之类的成本。你不超兽 CPU,百分之百亏得倾家荡产。

比较良心的商家,这机器可以卖 100 个 1 核 2G,比较牛逼的商家可以卖 200 个 1 核 1G 或者 100 个 2 核 2G。

这只是 CPU 的情况,我们再来看硬盘和网络。
良心点我们用全 SSD 阵列来算,10 盘 RAID 10 的 512G SSD 是 2.5T ,100 个用户每人 25G,正好。
但是别忘了,iops 每台机器只能分到十分之一的硬盘,比如你家用硬盘读写能到 500MB/s 的,VPS 里就只能分到 50MB/s,只要你邻居开始搞事情,你的速度就狂掉了。

就不说现在各种云还在用的 HDD 有多慢了。石头盘被大家吐槽了很久了。就算是 AWS,普通的 SSD 硬盘 EBS 也是炒鸡慢,为什么?因为 EBS 是远程的,所有的读写操作都要走网络( Fiber Channel 或者 iSCSI 等)访问一个共享 SAN,延迟上升,读写速度就直线下降。

网络嘛,千兆口 100 个人用,结果你懂的。
有厂商用万兆口吗?有,但是……不便宜。
Betacoefficient
2017-07-26 12:50:27 +08:00
我也觉的自己买机器好,毕竟机器自己看得见,摸得着,云谁知道稳不稳定啊。
msg7086
2017-07-26 12:53:46 +08:00
@mhycy 5650 单线其实还行的,和 E5 比,最大的差距我觉得在功耗。
5650 单路点亮就是 100w,E5v1 单路是 50w,单算电费一年就能省下 50 刀,还是很明显的。

@winglight2016 这个我也算过,买 Ryzen 配 DDR4 非 ECC,还是比买 5600 系列配 DDR3 REG ECC 要贵不少的。
主要是内存贵啊。

@lianxiaoyi 我也是兼职装电脑的。总体感觉还行吧,真要玩「云」的话搭一个私有云也不算太麻烦,ESXi 或者 KVM 都有对应解决方案的,也有图表什么的可以看。
mhycy
2017-07-26 13:35:49 +08:00
@msg7086
参考 Passmark, X5650 对比 E5-2650 V2 单线程上还是有点距离。
我们总预算 12000,兼顾数据库和业务,存储需求较小所以选择 E5,配合 ESXI,最大化利用。
如果需要存储机( ZFS ),那么肯定是 56XX 系列走起,毕竟平台成本省了不少。

配置清单:
Intel E5-2650 V2 * 1
900, HP 拆机

Intel P4308CP4MHEN * 1
3600, 全新

Micron REG ECC DDR3 1866 16G * 4
370, HP 拆机

DELL H730 Pro * 1
1650, 全新工包

HP 468406-B21 SAS Expander * 1
80, HP 拆机

Toshiba Q200 EX 240G * 4
579, 全新

Toshiba P300 3T * 2
599, 全新

Seagate 15K SAS 146G * 6
0, 老服务器退役
goodryb
2017-07-26 13:50:54 +08:00
@msg7086 #70 这样黑真的好吗?
网络嘛,千兆口 100 个人用,结果你懂的。有厂商用万兆口吗?有,但是……不便宜。见识少也不用这么说,何止是万兆,现在都是朝着 25G、40G 的基础网络在发展,你家 IDC 没升级过吗?
goodryb
2017-07-26 13:56:25 +08:00
创业公司使用云最大的好处是灵活,省人力成本,无需关心底层的运维问题,可以更好的专注于业务

等公司发展到一定规模,有了自己的运维团队,这个时候,选择 IDC 还是云可以对比来看下
msg7086
2017-07-26 15:13:21 +08:00
@goodryb 25G、40G 插服务器上做网口?然后全 40G 交换机放柜子里?
像 Linode 这样在母机上塞 40Gbps 的的确有。但是你见过的在母机上用万兆甚至 25/40 的,请问 VPS 的价格,是便宜还是不便宜?

另外我这也不是要去黑,超兽,或者说虚拟化,本来就是合理最大化使用资源的手段。
网络就算是母机不超,整个机柜呢,机房呢,还是会超兽。(倒不如说一定会超兽。)
一个机房一万用户,一人给个百兆,机房会去拉 1Tbps 网么,对不对。
但是超兽只要合理,控制得当,对每个人的影响就小了。

@mhycy 现在 2011 的主板还是贵,要便宜货还是得到处淘啊 ww
azuis
2017-07-26 15:20:15 +08:00
@msg7086 其实用云最大的优势是节省人力成本…不用去考虑硬件上的问题。而且低成本多点部署…虽然平均下来单位计算能力云肯定比自己托管贵,但是总体运行成本不见得高。毕竟各大云厂商的高级技术支持服务比多雇一个员工成本低多了。
hellojl
2017-07-26 15:22:36 +08:00
几十台的话量不小了,算上维护成本不如上云了
goodryb
2017-07-26 15:23:24 +08:00
@msg7086 #77 多看看没坏处 http://www.eet-china.com/news/article/201704190937

“像 Linode 这样在母机上塞 40Gbps 的的确有。但是你见过的在母机上用万兆甚至 25/40 的,请问 VPS 的价格,是便宜还是不便宜?”

母机早就万兆了,25/40 是未来的趋势。不要抓着辫子不放,赶紧剪掉,大清早就亡了
msg7086
2017-07-26 15:24:41 +08:00
@azuis 是的,初期不明确需求,或者是频繁试错阶段,用云很划算,随用随扔。
不过上到一定规模,需求比较稳定了,或者是像楼主这样有特殊要求的话,就应该考虑用云还是自建服务器了。
另外和应用也有关系,比如说如果只是开一堆服务器跑计算(比如挖矿或者视频转码),那其实也不需要多少运维成本。如果是做网站之类的,那运维成本可能就会上升。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://tanronggui.xyz/t/377882

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX