国内首家万兆核心网吧改造实例

　　—广东惠州金龙泉网吧

　　应惠州同城网盟的邀请，TG-NET为惠州金龙泉网吧进行了国内首家万兆核心改造。为了全方位展现此次万兆方案施工的过程细节，以及实际效果，TG-NET与惠州同城网盟经测试后，共同撰写了此份报告，供国内的网吧行业的从业人士参考。

　　1. 网吧情况介绍

　　? 名称：惠州市惠城区金龙泉网吧

　　? 地址：惠州市惠城区麦地花边南路

　　? 网吧老板：何老板

▲

　　? 服务器配置：服务器二台，配置如下：

　　备注：服务器是4个146G做回写，阵列速度约为 650 M/S，镜像包是放在回写盘里面的。

　　服务器配置

　　序号 类别 品牌 型 号

　　01 CPU 至强 E5506

　　02 主板 超微 X8DTL-3

　　03 内存 金士顿 KST 4G ECC DDR3 *3

　　04 SAS卡 Pake 1068E

　　05 SAS线 　 8条 1对1 SAS 线

　　06 硬盘 希捷 SAS 146G *4 SAS 300G *2 SAS73G*1

　　07 硬盘 西数 STAT WD500G * 2

　　08 机箱 海存 4U机箱

　　09 电源 航嘉 600W

　　10 网卡 Intel Dual Intel 82574L Gigabit Ethernet Controller

　　11 系统 网众 7.0 Linux 5.0 820内核

　　? 客户机配置：客户机230台，配置如下：

　　客户机配置

　　序号 类别 品牌 型 号

　　01 CPU Intel 酷睿 I5

　　02 主板 昂达 魔剑H55

　　03 显卡 昂达 GTS 450 1024MB GD5

　　04 内存 金士顿 4G

　　05 网卡 Realtek RTL8111DL千兆网卡

　　? 改造前网络配置：

▲

　　介绍：主交换机采用2台全千兆16光+8电的交换机级联，接入层采用11台24电+2光支持汇聚功能的交换机，核心交换机到接入交换机采用双光纤汇聚连接。二台服务器分别通过双千兆网卡绑定连接到二台主交换机上面。其它服务器与路由器分别接到主交换机上面。

　　2. 万兆方案改造过程

　　2.1. 为了不影响网吧正常营业，在前一天网吧包夜时，就通知网管把人员分流到其中一台服务器上面，把另外一台服务器关掉。

　　2.2. 第二天一早赶到网吧，在万兆改造之前，首先对现有的千兆网络进行了相关数据的测试，具体见后面的对比报告。

　　2.3. 测试完千兆数据后，将关闭的这台服务器打开机箱，装上万兆网卡，由于网吧无盘服务器系统是网众的7.0，是Linux 5.0.820的内核，所以不需要安装驱动，装好网卡，启动服务器，系统除了显示自带的二张千兆网卡外，新增的万兆网卡也自动驱动成功，紧接着配置万兆网卡的IP地址。配置完成后，连通万兆交换机进行简单测试，竟然发现连不通?检测万兆交换机以及万兆光纤模块、光纤线等，都没有发现任何问题，最后猜测会不会是系统默认板载的千兆的网卡为主网卡，如主网卡不通，另外几张网卡也无法使用(因为当时板载的网卡网线没连接)。就尝试把板载的二张千兆网卡禁用，重启服务器，果然一切正常。(如果以后有出现类似万兆网卡不通的情况，可采取上述方式，禁用板载的网卡，估计WINDOWS版无盘系统不会有此问题。其它无盘系统安装此网卡，请参照TG-NET万兆网卡安装教程)

　　2.4. 根据网吧现有的主干交换机与接入交换机的汇聚接口配置情况，将S5500-28F-4TF前面的24个千兆光口配好汇聚组。因为网吧只有二台服务器，所以交换机上面扩展了一块二端口的万兆业务板S5500-2SFP+。将二端口万兆扩展卡接在核心交换机后面，插上万兆光纤模块。S5500-28F-4TF有24个光口和4个复用千兆电口，所以11台分交换机全部可以直接双光纤汇聚到核心万兆交换机上面，使用了核心交换机上面的22个光口。然后再用其中余下的2个复用电口汇聚一台支持汇聚的24电口的交换机，把路由器，收银，监控等等对数据量要求不大的服务器和相关设备连在这台交换机上面，这样，交换机的端口利用率正好使用到100%，一点都不浪费。

▲

        万兆交换机前面照片：有24个千兆光口，4个复用电口。

▲

        万兆交换机后面照片，有一个扩展位，因为2台服务器，就插了一张二端口的万兆卡，接上万兆模块，接上光纤跳线，OM3的光纤跳线一般都是这种淡蓝色的。

　　2.5. 等早上包夜结束后，让网管暂停网络，把原来的二台千兆主交换机拿下，换上刚才配置好的万兆核心交换机，一边把下面分交换机的光纤线对应汇聚插到核心交换机上面，并同时把原来的路由器、收银机等其它线接到一台24电口的交换机上面。一边同步安排同事把另外一台服务器的万兆网卡安装好。最后，把二台服务器的万兆网卡与核心交换机的二个万兆接口通过万兆光纤跳线连接好。重新启动服务器与交换机网络，网络停了不到半个小时，网络恢复正常运行，改造全部完成。

　　2.6. 然后按前面测试千兆环境下数据的方式，把万兆核心环境下的相关数据又同样进行了测试，数据在后面。

　　2.7. 改造后网吧拓扑如下：

▲

　　该网吧万兆改造设备的清单如下：

　　类别 型号 基本规格描述 数量

　　万兆多层核心交换机 S5500-28F-4TF 24个千兆SFP端口，4个10/100/1000M复用电口

　　1个万兆模块扩展槽(最大可扩4个万兆口)

　　交换容量：240Gbps，全线速过滤转发96Mpps 1台

　　万兆扩展板 S5500-2SFP+ 2端口万兆SFP+模块扩展板，需配SFP+模块 1块

　　万兆双端口以太网网卡 PCIE-10GE-2SFP 处理器芯片：英特尔 82599ES*1

　　网络接口类型：SFP+插槽 *2

　　支持速率：每端口10 GbE 2块

　　万兆光纤模块 SFP-10GE-SX-MM850 万兆SFP+多模模块-(850nm,0.3km,LC) 4个

　　OM3光纤跳线 万兆OM3,长度3米,LC-LC,多模双芯 2根

　　3. 万兆与千兆对比测试数据

　　为了不影响网吧营业，我们千兆核心与万兆核心测试的数据都是一台服务器下面带100台客户机测试的。备注：为了保证测试数据的准确性，测试过程是关闭所有服务器跟客户机缓存。

　　3.1. 100台电脑同时启动的时间：

　　机数 千兆核心 机数 万兆核心

　　启动时间(S) 启动时间(S)

　　100 部份启动时间130秒，部份卡死 100 23秒完成全部启动

　　千兆环境100台PC同时开机时，服务器网卡最高的流量：

▲

　　万兆环境100台PC同时开机时，服务器网卡最高的流量：

▲

　　3.2. 用HD Speed 测试 12台客户机到服务器的读取速度.

　　机数 千兆核心 机数 万兆核心

　　平均(M/S) 平均(M/S)

　　1 85 1 100

　　5 23 5 100

　　12 10 12 51

　　备注：测试时按分交换机平均选取PC。

　　千兆环境12台PC同时HD Speed测试服务器网卡流量监控图：

▲

　　万兆环境12台PC同时HD Speed测试服务器网卡流量监控图：

▲

　　3.3. 数据分析及总结：

　　3.3.1. 万兆核心在处理突发数据时远远高于千兆核心;

　　3.3.2. 万兆核心在处理大流量数据时远远高于千兆核心，千兆核心的处理速度满载也就100M/S 左右，而万兆核心的数据流量能高达648M/S ，充分的把硬盘的速度发挥了出来;

　　现今很多网吧在测试时，都是在空载或者通过单机测的理论值，这对于网吧实际运营来讲，并没有太多的意义。真正考验一个网吧的网络环境的好坏，是在网吧上机人员爆满的时候才能体现出来。所以，对于网吧而言，如何保证在人多数据量大的时候，各种新的应用不断增加之后，网络不卡，运行稳定，这才是王道，才能留住客源，提高网吧竞争力。