VMware BitFusion 初探一（环境搭建）

川长思鸟来 2023-03-02 13:27 61阅读 0赞

### **VMware vSphere BitFusion介绍** ###

> `VMware在2019年8月收购了BitFusion，后者是硬件加速设备虚拟化领域的先驱，重点关注GPU技术。 BitFusion 提供了一个软件平台，可将特定的物理资源与环境中所连接的服务器分离，通过网络的方式让多个Client共享GPU计算能力。`
> 
> `VMware一直没有自己的GPU虚拟化技术，通过BitFusion终于补上了GPU虚拟化这块空白。`

> `Bitfusion client运行AI / ML应用程序，该应用程序通过网络共享Bitfunsion Server上的直通GPU。 Bitfusion 可以将GPU内存划分为任意大小不同的切片，然后分配给不同的客户端以供同时使用。 Bitfusion 可以为VM和Container远程提供GPU计算能力。`

Bitfusion 的 GPU 资源池有点类似于存储区域网络 SAN (Storage Attached Network)，所以也有人把它叫作 GPU Attached Network。

![20200730111302404.png][]

### 1. 配置NVIDIA显卡直通模式 ###

确认NVIDIA显卡所在ESXi主机BIOS中Memory Mapped I/O above 4GB启用

![20200729190441265.png][]

配置ESXI主机上的显卡为直通模式，因为需要配置到BitFusion虚机上；

![20200729190613350.png][]

勾选所有NVIDIA显卡；

![20200729190650884.png][]

配置完成后需要重启一次，重启后就可以看到直通显卡。

![20200729190715957.png][]

### 2. 部署 BitFusion Server ###

官网下载Bitfusion OVA安装包

![20200729190825168.png][]

这里注意 Extra configuration里的pciPassthru.64bitMMIOSizeGB = 256，部署完bitfusion虚机后，需要根据实际显卡内存系数进行调整。

![20200729190844573.png][]

注意vCenter GUID, vCenter URL和vCenter TLS Certificate Thumbprint

![20200729190928585.png][]

配置密码和IP地址等信息（建议MTU配置为9000）

![20200729191008284.png][]

可以配置多个端口用于数据传输（可选）

![20200729191042597.png][]

OVF导入完成后，不要开机。

编辑虚机：

1. 调整CPU和内存，内存大小为显卡总内存 \* 1.5

2. 添加网卡（默认只有1块网卡）

3. 添加所有直通显卡

![20200729191150854.png][]

修改虚机高级参数

pciPassthru.64bitMMIOSizeGB=\{n\}

where n equals (num-cards \* size-of-card-in-GB) rounded up to NEXT power of  2:

example A: 2 16GB cards => 2 \* 16 => 32 => rounded to next power of 2 = 64

example B: 3 16GB cards => 3 \* 16 => 48 => rounded to next power of 2 = 64

![20200729191305986.png][]

配置完成后打开BitFusion电源，等待10分钟左右，BitFusion会自动注册Plugin，刷新浏览器。

![20200729191330825.png][]

打开BitFusion管理界面

![20200729191441227.png][]

注意BitFusion需要ESXi分配vSphere Enterprise Plus License，否则会提示License无效。

![20200729191408391.png][]

### 3. 部署 BitFusion Client ###

注意：目前仅支持RHEL/Centos 7, Ubuntu 18.04/16.04

部署一台CentOS7虚机，不要开机，确认Run VMware Tools Scripts全部勾选；

![20200729191732240.png][]

右击CentOS 7 虚机，启用bitfusion client；

![20200729191823333.png][]

选择 For a client；

![20200729191909133.png][]

将CentOS7虚机开机，然后执行以下命令安装bitfusion client

安装bitfusion-client
    # yum install -y epel-release
    # rpm --import https://packages.vmware.com/bitfusion/vmware.bitfusion.key
    # yum install -y https://packages.vmware.com/bitfusion/centos/7/bitfusion-client-centos7-2.0.0-11.x86_64.rpm

将需要使用bitfusion的账号加入bitfusion group，我这里使用root账号``

# Example: add “root” to the bitfusion group              
    $ sudo usermod -aG bitfusion root

测试bitfusion client是否部署成功；

# connect to bitfusion and list all gpu
    $ bitfusion list_gpus 
     - server 0 [10.10.10.11:56001]: running 0 tasks 
       |- GPU 0: free memory 15109 MiB / 15109 MiB
       |- GPU 1: free memory 15109 MiB / 15109 MiB
       |- GPU 2: free memory 15109 MiB / 15109 MiB

**如果成功显示bitfusion server上配置的直通显卡信息，恭喜你配置成功。**

**下一篇文章演示：**[VMware BitFusion 再探二（功能测试）][VMware BitFusion]

[20200730111302404.png]: /images/20230208/f72ad50a21bf4d28a77008de568c7e0c.png
[20200729190441265.png]: /images/20230208/36e961c0803f47d098f48e6559990ad9.png
[20200729190613350.png]: /images/20230208/c7075f101d6f48e9a0f8aee53ba6e0f2.png
[20200729190650884.png]: /images/20230208/71f9613a19ac4b29afb26a3f7f3823a6.png
[20200729190715957.png]: /images/20230208/af4e403d9dcd423ba5d9d43b17004e92.png
[20200729190825168.png]: /images/20230208/1d39b52ee0e749a6bfa141bea998cfef.png
[20200729190844573.png]: /images/20230208/cdb98be4379749d8a432164d423f9b6a.png
[20200729190928585.png]: /images/20230208/d8975d50720d4f01be75a46e412425f8.png
[20200729191008284.png]: /images/20230208/7181ec7ee3544ebba0f3f1f6ccb1b538.png
[20200729191042597.png]: /images/20230208/3d40b3820a5845a8b999c6f809626c07.png
[20200729191150854.png]: /images/20230208/5bb693e8f1b84545a1a2181af32ba481.png
[20200729191305986.png]: /images/20230208/9d048487fb214251acd54080a88ffbe3.png
[20200729191330825.png]: /images/20230208/05d14efee84940db8e6968c70b708e3a.png
[20200729191441227.png]: /images/20230208/fcee43b42a0c46cf80b025438b8dac08.png
[20200729191408391.png]: /images/20230208/9e112081e787447ea6f0c436c41df4d4.png
[20200729191732240.png]: /images/20230208/dacae1d8edc549df978de4bdb8090b52.png
[20200729191823333.png]: /images/20230208/29bd5b1ff3d34f1c9d608cdac5f88891.png
[20200729191909133.png]: /images/20230208/69a08debeb3c4914bc2b01314db271fe.png
[VMware BitFusion]: https://blog.csdn.net/coco3848/article/details/107673287