究极进化？不讲武德的万兆光结构全案例实场景组网分享！

tonrain

题记：由于最近更新了NAS，一台体积硕大的群晖DS3617XS，导致以前魔改的“鞋柜”机房不堪负重，塞不进去，所以只能另选别处，本来计划是又放回书房，结果被媳妇一顿吐槽。无奈之下，也顺水推舟，忽悠着上了机柜。
于是又开始了一轮大折腾....





自己也没想到会这么快就上了机柜，因为以前一直以为玩机柜至少是下套房的时候了，可是因为设备是越来越多，没辙。事已至此，那就勉为其难的接受呗。这刚折腾完，自己对效果还挺满意，也就趁着热乎劲来总结一波，把这几年折腾的情况都来总结下吧。
我把它们分为成长体，完全体、究极体三个阶段。（直接忽略掉再往前一台路由器走天下的版本）

第一阶段，首先是初次接触万兆：成长体的时候，设备早已经从弱电箱霸占到了鞋柜了。



配置：
光猫：华为 HN8055Q
路由：华硕AX11000+成品软路由
交换机：UBNT-XG-6POE、网件GS108T
AP：UBNT IW以及IW-PRO各一台
控制器：UBNT UCK-GEN2-PLUSPC：ASUS 初版C100C万兆网卡加持的普通PC一台
NAS：群晖DS918+




第二阶段，接着是成熟体，因为之前的机房建设赶了工期，导致质量属于残次品，良心上过不去，所以决定痛改前非，进行一次质量升级！

经过了自己2分钟的深思熟虑，去测量了鞋柜的长宽高，去淘宝定制了几块木板，回来后一顿操作，就成了这样：



成品就是这个样子，但是有的设备是后续更新上的，比如8255Ws和9700S、还有那台超微的E302-9D。
当时的拓扑是这样的：




配置：
光猫：华为 HN8055Q
路由：华硕AX89X+成品软路由
交换机：UBNT-XG-6POE 、网件GS110EMX
AP：UBNT IW以及IW-PRO各一台
控制器：UBNT UCK-GEN2-PLUS
PC：intel X540网卡加持的普通PC一台
NAS：群晖DS1618+、配置一张群晖的E10G18-T2

交过的“学费”总结：
1、阿苏斯的路由器，玩法千篇一律，AX5300到AX11000完全就是挤牙膏，毫无新意；AX89X倒是一款不错的真万兆路由设备，但是售价高昂。
2、UBNT UCK，UBNT的控制器可以实现在很多平台上安装，比如nas的docker，树莓派，VM虚拟机啥的，UCK可买可不买。但是玩UBNT这个控制器是必不可少。
3、TB购买的成品软路由，i5-7200，64G SSD，8G RAM，6GE的配置，售价3K，体验非常的不好，发热严重，发热后就是降频，性能大降，重点是售后也渣，当时是初学，想看点视频学习学习，结果卖家隔几天就加密，一怒之下，扬之。

这个时候NAS也用上的UPS，设备也不是乱七遭八的摆放，只是因为散热问题，鞋柜没了鞋柜门，这也导致了另一大隐患——我家的小祖宗会经常来光顾，由于大门敞开，经常会在机房里看到什么袜子、玩具车、矿泉水瓶什么的。

所以，痛定思痛，来一次大改！





第三阶段，在我的忽悠和我家领导的超前远见、大义凛然下，迎来了万兆改革的究极体进化必要条件——机柜。
先上作品吧。

现役拓扑图大概是这样：



设备上架后是这样：



一个20U 、1000mm高、600mm深的标准机柜横空出世。
从此，设备们告别了鞋柜，住进了豪宅，走向了新时代...

从上往下依次是：
1、12芯ODF盘
2、理线架
3、UBNT US-16-XG
4、理线架
5、华为AirEngine 9700s-s AC控制器
6、超微E302-9D（上面是它的好朋友，USB风扇）
7、左为群晖 DS3617XS ，右为APC BR550G（专供NAS）

另还有光猫8255Ws和US-6POE继续坚守在鞋柜里，一是因为6POE要给AP供电，而8255要在那儿接出口的光纤。





接着详细描述下本次折腾的全过程：



首先是机柜的购买，关于尺寸问题，幸有上天保佑在客厅的角落还可以容纳下这么一个玩意。购买机柜的成本不高，算上托盘，理线架等一共800多，想定白色，可是要等一周，作罢。



接着就是本次任务最有隐患的一个环节——网线换光纤。
光纤是购买的12芯的单模光纤，ODF盘是12芯和8芯，做这样选择的原因是因为没有8芯的机架式ODF盘，只能是那种盒子状的，而弱电箱里因为尺寸问题也不能放一个12芯的ODF盘，所以就有了这么一个奇葩配置，一端12芯，一端8芯，不过弱电箱里可直接接4芯尾纤即可解决，也不是大问题。




开始抽拉光纤，此为机柜背后。



此为弱电箱处，换光纤的过程还是很轻松的，虽然有20多m长。因为在装修的的时候就特意嘱咐过装修团队要走活络线，所以拐弯处大都是大弯。
加之是装修完成以后才穿的所有线材，装修公司还做了直播穿线，所以我才这么大胆。




光纤和网线之间我用胶带缠了十几圈就搞定。




拉光纤倒是搞定了，可是熔纤又预约到了几天后，所以先把设备先装进机柜去吧，毕竟在外面多一天就多一天的危险。



门一锁，再也不担心小祖宗大驾光临。



几天后，大师傅大驾光临上门给熔纤，看他拎着大包小包的，一看就是专业的。



上热缩管，剪芯，清洁纤芯，熔纤...一气呵成。



手艺不赖，点个赞。



这是美中不足的地方，对端都是LC的，大师傅由于没有LC的尾纤，只有SC的，这...
好吧，总比没有强，而且反正暂时也用不了那么多芯，就当做个保护吧，聊胜于无。



搞完弱电箱端又搞机柜端，没有拖泥带水。



完了之后还给好好的盘了一下光纤，真的专业，巴适，哈哈。



光纤问题解决了，可是当时光交换机还没决定买哪一款（CRS326和US-16-XG的抉择），所以先把机柜风扇给解决了。
原装机柜带的是这种220V/0.1A的暴力扇，都没敢插电，直接取下。



从朋友那买了几个二手的猫扇，这就好多了。



比着看一下，完美适配。



安装好底部的盖子，完美适配。



成品就是这样，拍照是从机柜的顶部俯拍下去，也就说风扇是用来往上抽排气的。







然后，光交换机到了，之所以选择买US-16-XG，还是因为颜值和好管理，但是风扇确实是吵，而且风扇不好换，已经做好了魔改风扇的准备。



魔改风扇的胶枪也准备好了，为什么会用到这个，后续会解释。



UBNT US-16-XG多图杀猫。



因为好没领教到16-XG的风扇声的威力，上个架试试效果。




装上模块，模块是华为的万兆 1310nm 1.4KM 单模双芯LC。




开始走光纤。



走线折腾了好几个小时，勉强算及格了吧？



不过这风扇声儿确实太大了，虽然不是那种万转暴力扇，但是也不舒服！



所以，A4的猫扇，安排！



此处需要重点说一下这个玩意，此为3D打印的图纸，设计资料是由国外的一名大佬制作。
去下载了他上传的图纸，联系到了淘宝的3D打印商家，2天就搞定了。





此为3D打印的成品，效果很棒。
此处还需要感谢一下成都的宋老板提供途径和杭州的日总提供3D打印的支持。




所以，意思给16XG换4CM的猫扇，必须要用这个套件使用。




拆开机盖，对比一下就知道。




因为原装的风扇是3CM的，直接换是换不了的，强行更换头盖骨会装不上。






用这个3D打印的套件后会把风扇往中间部分延伸，不会卡住机盖的安装。
对比了下，尺寸很完美。



开始把套件和猫扇合体，因为是往外抽风，所以要注意下风扇安装的方向。



左侧安装到位。



右侧也安装到位。



整体的效果就是这样了。



安装好螺丝。



插好风扇电源，通电测试一次过，直接盖头盖骨了。



这套更换方案应该算是现如今最完美的解决方案了，更换后风扇的噪音下降了至少两档。



更换后交换机正常使用，风扇的转数正常，交换机的温度正常，人的耳朵也正常了。
给这位出图纸的大佬点个赞！



交换机重新上架。



同时给机柜背部来个整体照。



E302-9D住进大别野的特写。




DS3617XS住进大别野的特写。




这么短的线，就是上面拿来接E302的ipmi到LAN的。



前方来的特写。



两个最值银子的大佬的特写。



全家福合照。



关上机柜门，祝你们过的幸福。






开机，测个速，一读一写，NAS正常。




两台交换机也均正常，看状态，AP也正常。

搞完收工。
感谢大佬的观看。

Leap_ahead

满满的金钱的味道令人不适……

xiaopang666

路过....羡慕....

yhhekeda

不懂就问，大佬，两个交换机不是都有10g光口和电口吗，不可以用网线或者一根两头带模块的光纤线直连吗？

skypjsfly

兔佬没次发帖我仿佛看到的就是    钱钱钱钱钱

Animenzzz

666,生命在于折腾。光猫打算什么时候换

wyb4112

兔总竟然机柜没塞满...模块没塞满

52516

软路由不错（只跑路由有点可惜）

其余的…

812278850wei

家里屋子背景才是重点，一看就知道住别墅大户人家

uuyyhhjj

别墅吗，感觉可以专门给个小房间，机柜都不用了，还美观，门一关噪音也没有，加空调也方便

hanlingnan

真羡慕！本人家局域网因要走一段室外线路，为防干扰及高速早想换光纤了，但一个字的问题：钱

a1990330

感謝大老 分享
可以方便跟您要 3D列印設計圖嗎
我也有一台 US‑16‑XG 噪音真的很大 也想改裝貓扇

wyb4112

a1990330 发表于 2020-11-21 23:44
感謝大老 分享
可以方便跟您要 3D列印設計圖嗎
我也有一台 US‑16‑XG 噪音真的很大 也想改裝貓扇

发你短消息了

LiloLastI

墙里走的那根光缆等于是暂时只用了一根芯的意思吗？

CCarier

很好的参考贴！楼主辛苦啦！

ztxztxbw

内容很多，这贴很棒。

tonrain

yhhekeda 发表于 2020-11-21 20:45
不懂就问，大佬，两个交换机不是都有10g光口和电口吗，不可以用网线或者一根两头带模块的光纤线直连吗？ ...

可以用网线直连，但是6poe口的电口带poe很金贵，而sfp+上电模块虽也可以，但是温度没光模块舒服。索性一块儿换了。
两头都带模块的光纤线是aoc线，那个是成品没法穿管，dac线亦是如此。

tonrain

LiloLastI 发表于 2020-11-22 00:54
墙里走的那根光缆等于是暂时只用了一根芯的意思吗？

是的，现在那根光纤的就是只连了16xg和6poe，本来还可以在做一个链路聚合，但是意义不大，就拿来做一个冗余了，所以算用了四芯光纤。
其实重点是师傅上门熔纤，芯少了别人根本就不来，熔4和熔12价钱是一样的，哈哈

tonrain

uuyyhhjj 发表于 2020-11-21 22:48
别墅吗，感觉可以专门给个小房间，机柜都不用了，还美观，门一关噪音也没有，加空调也方便 ...

别墅是我努力的目标了，这儿就算是别墅有设备间也要上机柜，收拾起来方便也专业。供参考。

tonrain

Animenzzz 发表于 2020-11-21 20:47
666,生命在于折腾。光猫打算什么时候换

hhhh，暂时没想出，不要这样，我怕