腾讯云CVM配置多网卡方法
原创
一、相关限制
- cvm规格对弹性网卡的限制 根据 CPU 和内存配置不同，云服务器可以绑定的弹性网卡数和单网卡绑定内网 IP 数有相关限制； 具体参考官网说明
- cvm规格对弹性ip的限制 根据 CPU 配置的差异，单台云服务器支持绑定的公网 IP 数量上限有相关限制； 具体参考官网说明
- vpc下允许配置的网卡上限限制 截止本文生成（2020年4月12日），限制同一个 VPC 下的云服务器最多绑定50个弹性网卡； 具体参考官网说明
二、创建cvm
创建cvm可以参考官网文档，本文主要演示如果在腾讯云cvm上配置一个主网卡与两个辅助网卡。作者已经购买好cvm和弹性公网ip，这里提前给出规划的ip与网卡对应关系：
网卡属性 | 网卡名 | 内网ip | 外网ip |
|---|---|---|---|
主网卡 | test_cd_tel | 172.27.0.11 | 132.232.61.253 |
辅助网卡 | test_cd_cnc | 172.27.1.11 | 132.232.247.133 |
辅助网卡 | test_cd_cmcc | 172.27.2.11 | 111.231.194.145 |
三、创建弹性网卡
- 详细配置可以参考腾讯云官网配置手册
四、绑定弹性网卡
注意：要先将网卡绑定到云服务器，再将公网ip绑定到网卡上，顺序相反会报错。
1.绑定云服务器
回到刚才的弹性网卡页面，在右上角搜索“test_cd”，可以看到作者在此创建了两个辅助弹性网卡和主网卡，点击如下图中的网卡右侧的绑定云服务器，在弹出的页面中绑定cvm。
注意下图中红框标注的配额，确认自己的服务器是否支持绑定
- 详细配置可以参考腾讯云官网配置手册
2.绑定公网ip
绑定完云服务器后，到云服务器页面，找到自己的实例，进入实例页面，查看弹性网卡子页，点击绑定，绑定已经购买好的弹性公网ip
五、配置弹性网卡
1.查看网卡对应关系
登录服务器，查看网卡mac地址
root@server ~# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
link/ether 52:54:00:17:8e:55 brd ff:ff:ff:ff:ff:ff
inet 172.27.0.11/20 brd 172.27.15.255 scope global eth0
valid_lft forever preferred_lft forever
inet6 fe80::5054:ff:fe17:8e55/64 scope link
valid_lft forever preferred_lft forever
26: eth1: <BROADCAST,MULTICAST> mtu 1500 qdisc noop state DOWN group default qlen 1000
link/ether 20:90:6f:ca:6c:57 brd ff:ff:ff:ff:ff:ff
27: eth2: <BROADCAST,MULTICAST> mtu 1500 qdisc noop state DOWN group default qlen 1000
link/ether 20:90:6f:56:21:03 brd ff:ff:ff:ff:ff:ff确认网卡对应关系
注意eth1、eth2并不是与控制台的网卡顺序对应，这里利用cvm元数据mac地址来确认对应关系，mac地址见上面“ip a”命令获取到的“link/ether”字段
- 元数据使用方法见官网说明
root@server ~# curl http://metadata.tencentyun.com/latest/meta-data/network/interfaces/macs/52:54:00:17:8e:55/local-ipv4s/172.27.0.11/gateway
172.27.0.1
root@server ~# curl http://metadata.tencentyun.com/latest/meta-data/network/interfaces/macs/20:90:6f:ca:6c:57/primary-local-ipv4
172.27.1.11
root@server ~# curl http://metadata.tencentyun.com/latest/meta-data/network/interfaces/macs/20:90:6f:56:21:03/primary-local-ipv4
172.27.2.11根据获取的地址，知道对应关系是
弹性网卡名 | 内网ip | linux内网卡名 |
|---|---|---|
test_cd_cnc | 172.27.1.11 | eth1 |
test_cd_cmcc | 172.27.2.11 | eth2 |
2.配置网卡
修改网卡配置文件
- 以eth0配置文件为模板复制eth1、eth2
root@server ~# cd /etc/sysconfig/network-scripts/
root@server network-scripts# cp ifcfg-eth0 ifcfg-eth1
root@server network-scripts# cp ifcfg-eth0 ifcfg-eth2- eth0需要修改内容：
- 启动方式改为静态
- 添加ip地址和网关（网关在上面查看元数据处第一条命令已经获取）
- eth1、eth2需要修改内容：
- 启动方式改为静态
- 添加ip地址，修改mac地址，不需要添加网关地址
配置完的格式参考下面
root@server network-scripts# cat ifcfg-eth0
BOOTPROTO=static
DEVICE=eth0
IPADDR=172.27.0.11
HWADDR=52:54:00:17:8e:55
NM_CONTROLLED=no
ONBOOT=yes
PERSISTENT_DHCLIENT=yes
TYPE=Ethernet
USERCTL=no
GATEWAY=172.27.0.1
root@server network-scripts# cat ifcfg-eth1
BOOTPROTO=static
DEVICE=eth1
IPADDR=172.27.1.11
HWADDR=20:90:6f:ca:6c:57
NM_CONTROLLED=no
ONBOOT=yes
PERSISTENT_DHCLIENT=yes
TYPE=Ethernet
USERCTL=no启动网卡
root@server network-scripts# service network restart
Restarting network (via systemctl):
[ OK ]启动完成后，需要在cvm控制台对每个网卡配置安全组，才对对外服务
六、配置策略路由
1.手动配置方法
手动配置方法，参考官网说明第5点
此处最好将相关命令写入到/etc/rc.local，否则重启后需要重新配置
2.自动化脚本
下载自动化脚本
root@server ~# git clone https://github.com/cnsbear/policy_route_cooking.git
root@server ~# cd policy_route_cooking-c 清除旧的策略路由，然后生成新的策略路由
root@server policy_route_cooking# sh policy_route_cooking.sh -c
root@server policy_route_cooking# sh policy_route_cooking.sh写入启动文件，重启时自动配置
root@server ~# echo "sh /root/policy\_route\_cooking/policy\_route\_cooking.sh -c" >> /etc/rc.local
root@server ~# echo "sh /root/policy\_route\_cooking/policy\_route\_cooking.sh" >> /etc/rc.local七、UDP服务对策略路由的特殊处理
1.原理
在cvm中启动一个服务，当将服务在3个ip上都绑定时，tcp服务与udp服务都能正常工作；但是将服务绑定在0.0.0.0（INADDR_ANY），会发现udp服务下，策略路由没有生效。
这是因为对于udp
当0.0.0.0作为接收端，调用bind()函数绑定ip时，接收来自任意ip、任意网卡的发给指定端口的数据;
当0.0.0.0作为发送端，调用bind()函数绑定ip时，使用网卡号最低的网卡（通常是eth0）发送数据;因此当使用udp服务时，若代码没有做特殊处理，最好将服务监听的每个对外网卡ip上，而不是0.0.0.0
2.测试验证
使用python代码做测试
server端
#!/usr/bin/python
# -*- coding: UTF-8 -*-
# 文件名：server.py
import socket
import sys
ip = sys.argv[1]
address = (ip, 3000)
s = socket.socket(socket.AF_INET, socket.SOCK_DGRAM)
#s = socket.socket()
s.bind(address)
while True:
data, addr = s.recvfrom(2048)
print "received:", data, "from", addr
s.sendto('this is a udp server',addr)
s.close()client端
#!/usr/bin/python
# -*- coding: UTF-8 -*-
# 文件名：client.py
import socket
import sys
ip = sys.argv[1]
address = (ip, 3000)
s = socket.socket(socket.AF_INET, socket.SOCK_DGRAM)
while True:
msg = raw_input()
if not msg:
break
s.sendto(msg, address)
data, addr = s.recvfrom(2048)
print "received:", data, "from", addr
s.close()在server监听在0.0.0.0
root@server ~# python server.py 0.0.0.0在客户端118.126.91.54上测试
首先测试eth0
python client.py 132.232.61.253
0.0.0.0-test
received: this is a udp server from ('132.232.61.253', 3000)再测试eth1
root@office:~# python client.py 132.232.247.133
0.0.0.0-test可以看到，eth1只能发送，不能接收；只有test_cd_tel能正常访问
在server上监听在eth1
root@server ~# python server.py 172.27.1.11客户端测试访问eth1
root@client:~# python client.py 132.232.247.133
eth1-test
received: this is a udp server from ('132.232.247.133', 3000)可以看到，监听在eth1，可以正常访问
原创声明：本文系作者授权腾讯云开发者社区发表，未经许可，不得转载。
如有侵权，请联系 cloudcommunity@tencent.com 删除。
原创声明：本文系作者授权腾讯云开发者社区发表，未经许可，不得转载。
如有侵权，请联系 cloudcommunity@tencent.com 删除。
腾讯云开发者
