发明内容

本发明的目的在于提供一种基于PCIe的多端口网络报文收发方法，以克服现有技术中的不足。

为实现上述目的，本发明提供如下技术方案：

本发明公开了一种基于PCIe的多端口网络报文收发方法，包括以下步骤：

S1：ARM和FPGA虚拟若干个网络设备，对原始网络报文添加端口号，在单路PCIe通道上实现多个网络端口同时收发数据的功能；

S2：ARM采用发送网络报文页合并、多页聚合发送和超时发送机制，在发送报文页合并和合并页发送过程中采用两个独立线程和两个无锁缓存进行操作；

S3：ARM对网络报文发送和接收的处理线程进行CPU绑核处理。

作为优选，所述步骤S1包括以下子步骤：

S11：ARM在网络驱动程序中创建若干个虚拟网络设备，FPGA创建与虚拟网络设备数量相同的对外网口的网络设备，通过PCIe通道进行数据交互；

S12：ARM根据虚拟网络设备在发送网络报文中添加端口号，然后插入网络原始发送报文无锁缓存队列中，包含以下子步骤：

S121：ARM创建可存储M个报文结构体地址的网络原始发送报文无锁缓存队列；

S122：ARM根据虚拟网络设备确定发送网络报文的端口号，利用报文结构体sk_buff中的vlan_cfi字段，将端口号填写到该字段中；

S123：修改后的报文结构体地址插入到网络原始发送报文无锁缓存队列；

S13：ARM接收FPGA的网络报文，解析获取端口号，根据端口号把原始报文发送给相应的虚拟网络设备，包含以下子步骤：

S131：ARM申请包含N个页的报文接收页缓存，并将缓存的物理地址发送给FPGA；

S132：FPGA接收外部网口数据，在网络报文的头部加上端口号，写入到缓存并更新发送引擎的状态，每页中只写一个报文便于ARM读取；

S133：ARM创建网络报文接收线程，循环读取FPGA的发送引擎的状态，检测到有报文到达，获取缓存中包含报文的页头和页尾，依次读取报文，解析得到端口号，将剥除端口号的原始报文发送给相应的虚拟网络设备。

作为优选，所述步骤S2包括以下子步骤：

S21：ARM创建可存储P个页的网络报文合并页无锁缓存队列，P<M；

S22：ARM申请可存储P个unsigned char的数组pkg_delay_times，存储对应页合并延时时间，申请可存储P个unsigned short的数组page_data_len，存储对应页的有效数据长度，定义页合并超时时间阈值pkg_delay_threshold_times；

S23：ARM创建网络发送原始报文合并线程，对网络原始发送报文无锁缓存队列进行页合并处理，插入网络报文合并页无锁缓存队列；

S24：定义报文合并页发送触发阈值：page_threshold_nums，page_threshold_nums<P，定义报文合并页延时触发阈值：delay_threshold_times；

S25：ARM创建网络报文合并页发送线程，处理网络报文合并页无锁缓存队列中的报文合并页，通过DMA将数据传输到FPGA。

作为优选，所述步骤S24中定义的报文合并页延时触发阈值：delay_threshold_times大于所述步骤S22中定义的页合并超时时间阈值：pkg_delay_threshold_times。

作为优选，所述步骤S23包括以下子步骤：

S231：检测网络报文合并页无锁缓存队列是否已满，直至检测到网络报文合并页无锁缓存队列未满，获取当前网络报文合并页，并检测网络原始报文发送无锁缓存队列是否有待发送报文，

若队列中没有待发送的报文，执行步骤S232，若队列中有待发送的报文，执行步骤S235；

S232：检测当前网络报文合并页对应的页有效数据长度：page_data_len是否为0，

若页有效数据长度：page_data_len=0，重新回到步骤S231，否则执行步骤S233；

S233：当前网络报文合并页对应的页合并延时时间pkg_delay_times加1us，网络发送原始报文合并线程执行udelay(1)函数休眠1us，检测当前网络报文合并页对应的页合并延时时间pkg_delay_times是否大于页合并超时时间阈值pkg_delay_threshold_times，

若页合并延时时间pkg_delay_times大于页合并超时时间阈值pkg_delay_threshold_times，执行步骤S234，否则重新回到步骤S231；

S234：当前网络报文合并页插入网络报文合并页无锁缓存队列，重新回到步骤S231；

S235：读取网络原始发送报文无锁缓存队列中最老报文的长度信息，检测当前当前网络报文合并页是否有足够的剩余缓存存储该报文，若剩余缓存不够，执行步骤S236，若剩余缓存足够，执行步骤S237；

S236：将当前网络报文合并页插入网络报文合并页无锁缓存队列，检测网络报文合并页无锁缓存队列是否已满，直至检测到网络报文合并页无锁缓存队列未满，获取当前网络报文合并页，执行步骤S237；

S237：将报文结构体sk_buff中vlan_cfi字段、data_len字段和报文数据分别拷贝到网络报文合并页中的报文数据长度字段、端口号字段和的报文数据内容部分，更新当前网络报文合并页中报文个数字段，更新相对应的页有效数据长度page_data_len的信息，释放网络报文sk_buff缓存和该报文在网络原始发送报文无锁缓存队列中的资源；

S238：检测网络原始发送报文无锁缓存队列是否有待发送的报文，若队列中有待发送的报文，回到步骤S237，若队列中没有待发送的报文，重新回到步骤S231。

作为优选，所述步骤S25包括以下子步骤：

S251：检测网络报文合并页无锁缓存队列是否有待发送的报文合并页，直至检测到队列中有待发送的报文合并页，执行S252；

S252：计算得到待发送报文合并页的个数page_nums，判断合并页的个数page_nums是否大于文合并页发送触发阈值page_threshold_nums，若合并页的个数page_nums大于文合并页发送触发阈值page_threshold_nums，执行步骤S255，否则执行步骤S253；

S253：将待发送报文合并页相对应的页合并延时时间pkg_delay_times相加，并与线程延时时间kthread_delay_times相加，得到总延时时间all_delay_times，判断总延时时间all_delay_times是否大于报文合并页延时触发阈值delay_threshold_times，

若总延时时间all_delay_times大于报文合并页延时触发阈值delay_threshold_times，执行步骤S255，否则执行步骤S254；

S254：线程执行udelay(1)函数延时1us，线程延时时间kthread_delay_times值加1，重新回到步骤S251；

S255：将待发送报文合并页组合，通过DMA传输，将报文发送到FPGA，将相对应的页有效数据长度page_data_len和页合并延时时间pkg_delay_times均置0，将线程延时时间kthread_delay_times置0，释放此次发送的报文合并页在网络报文合并页无锁缓存队列的资源，重新回到步骤S251。

作为优选，ARM采用六核处理器，分别为处理器CPU1-CPU6。

作为优选，所述步骤S3包括以下子步骤：

S31：网络原始发送报文合并线程绑定在CPU4运行；

S32：网络报文合并页发送线程绑定在CPU5运行；

S33：网络报文接收线程绑定在CPU6运行。

本发明的有益效果：

1、本发明通过ARM和FPGA虚拟四个网络设备及修改原始网络报文，在单路PCIe通道上实现四个网络端口同时收发数据的功能，有效降低成本；

2、由于ARM的DMA传输以页（4096 bytes）为单位，ARM创建两个无锁缓存和处理线程，对网络发送报文进行页合并处理，并通过页聚合发送和超时发送机制有效减少DMA传输，提高了网络传输效率，同时保证网络报文较少时的实时性；

3、ARM将网络原始发送报文合并线程、网络报文合并页发送线程和网络报文接收线程分别绑定在固定的CPU上，有效提升了网络报文的收发性能。

本发明的特征及优点将通过实施例结合附图进行详细说明。