深入浅出DPDK学习笔记——Nginx简单使用DPDK

小咪咪 2022-10-28 03:50 351阅读 0赞

处理器已经进入多核时代，多内核是指在处理器中集成两个或多个完整的计算引擎，多核处理器是单枚芯片。同时，目前流行的操作系统都已经可以利用这样的资源，将每个执行内核作为分立的逻辑处理器，通过在多个执行内核之间划分任务，在特定的时钟周期内执行更多任务，提供并行处理任务的能力。

### DPDK环境 ###

安装虚拟机，并添加网络适配器，如下所示  
![在这里插入图片描述][2021020512375432.png]  
编辑vmave安装虚拟机的文件夹下修改.vmx文件中的ethernetx.virtualDev为vmxnets  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FzbWFydGtpbGxlcg_size_16_color_FFFFFF_t_70]  
查看多中断网卡的中断号  
![在这里插入图片描述][20210205124021677.png]

### Nginx配置 ###

将nginx的worker进程绑定到cpu上，并将cpu和网卡的中断绑定，实现网卡中断唤醒相应的进程  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FzbWFydGtpbGxlcg_size_16_color_FFFFFF_t_70 1]  
修改nginx的配置，修改worker对cpu的亲和性，一个worker对应一个核，使用掩码来指定8个核中的一个  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FzbWFydGtpbGxlcg_size_16_color_FFFFFF_t_70 2]  
worker\_processes指令用来设置Nginx服务的进程数。官方文档建议此指令一般设置为1即可，赋值太多会影响系统的IO效率，降低Nginx服务器的性能。根据笔者的经验，为了让多核CPU能够很好地并行处理任务，可以将worker\_processes指令的赋值适当地增加一些，最好是赋值为机器CPU的倍数。当然，这个值并不是越大越好，Nginx进程太多可能增加主进程调度负担，也可能影响系统IO效率。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FzbWFydGtpbGxlcg_size_16_color_FFFFFF_t_70 3]  
worker\_cpu\_affinity指令用来为每个进程分配CPU的工作内核，其值是由几组二进制值表示的。其中，每一组代表一个进程，每组中的每一位表示该进程使用CPU的情况，1代表使用，0代表不使用。注意，二进制位排序顺序和CPU的顺序是相反的。比如00000001表示进程1使用CPU7的情况-进程1使用CPU0的情况，00000010表示进程2使用CPU7的情况-进程2使用CPU0的情况…10000000表示进程8使用CPU7的情况-进程8使用CPU0的情况。

编译DPDK  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FzbWFydGtpbGxlcg_size_16_color_FFFFFF_t_70 4]  
绑定cpu核到相应的中断号  
![在这里插入图片描述][20210205124710985.png]

![在这里插入图片描述][20210205124650374.png]

[2021020512375432.png]: /images/20221024/e87cdd9896fb4f12b71ad142accd56c0.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FzbWFydGtpbGxlcg_size_16_color_FFFFFF_t_70]: /images/20221024/2b880f9c382f433a8fd4ece469c4dd60.png
[20210205124021677.png]: /images/20221024/9b07d2e2158f4da6a4708563f5a0c9a7.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FzbWFydGtpbGxlcg_size_16_color_FFFFFF_t_70 1]: /images/20221024/a0fa3958b08b42999905d101b208b12b.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FzbWFydGtpbGxlcg_size_16_color_FFFFFF_t_70 2]: /images/20221024/6cae69edb31244c2933833852c22384e.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FzbWFydGtpbGxlcg_size_16_color_FFFFFF_t_70 3]: /images/20221024/0b13577445724d47834985ca3a036c06.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FzbWFydGtpbGxlcg_size_16_color_FFFFFF_t_70 4]: /images/20221024/2839c659bddc4dc2ae43834f6dd2be2d.png
[20210205124710985.png]: /images/20221024/3cbbe92a0bb74f4cb9a4d70cea6fb9c8.png
[20210205124650374.png]: /images/20221024/2cfc3cd336eb43e1845f8c407006f76c.png