DAOS源码编译

2024-12-09 16:48:12

1. 前言

本文详细介绍如何在almalinux8.9上编译DAOS.2.6.0源码。系统环境如下：

daos:           2.6.0
linux os:       almalinux 8.9
linux kernel:   4.18.0-513.5.1.el8_9.x86_64

DAOS从2.0.0开始是一个全新的架构设计，与1.x版本是不兼容的。另外，从2.6.0开始，DAOS开始支持Metadata-on-SSD，即支持非Intel Optane设备。

2. yum源配置

2.1. 配置DAOS yum源

[daos-2.6.0]
name=DAOS v2.6.0 Packages Packages
baseurl=https://packages.daos.io/v2.6.0/EL8/packages/x86_64/
enabled=1
#gpgcheck=1
gpgcheck=0
protect=1
#gpgkey=https://packages.daos.io/RPM-GPG-KEY-2023

2.2. 配置epel yum源

[epel]
name=Extra Packages for Enterprise Linux 8 - $basearch
baseurl=https://mirrors.aliyun.com/epel/8/Everything/$basearch
enabled=1
priority=3
gpgcheck=0
countme=1

2.3. 生成缓存

dnf make cache

3. 源码获取

git clone --recurse-submodules --depth=1 -b v2.6.0 https://github.com/daos-stack/daos.git
cd daos

测试发现，编译DAOS时，必须要通过git clone方式获取源码，通过下载zip包的方式，编译时会失败。因为在DAOS的编译配置文件中，会检查git仓库是否存在，如果不存在，则编译会失败。
可以通过git config --global url."https://gh-proxy.com/".insteadOf https://方式来配置github镜像源。

4. 安装依赖

4.1. 安装编译环境的依赖包

./utils/scripts/install-el8.sh

4.2. 安装python依赖包

官方在安装python依赖包时，采用了python虚拟环境，以下步骤是直接将依赖安装在系统里，而不是安装在python虚拟环境中。

4.2.1. 升级pip工具

python3 -m pip install -i https://mirror.nju.edu.cn/pypi/web/simple --upgrade pip

4.2.2. 安装python依赖

python3 -m pip install -i https://mirror.nju.edu.cn/pypi/web/simple -r requirements-build.txt

4.3. 安装DAOS的依赖包（可选）

dnf install hdf5-devel
dnf builddep ./utils/rpms/daos.spec

测试发现时，如果采用官方文档的编译方式，也就是不提前安装DAOS的依赖包，而是选择使用--build-deps=yes来控制在编译的过程中拉取第三方依赖包的源码，放入build/extra/release/目录下，然后去编译依赖。但是这种方式不会编译出依赖包的rpm包，只会编译出可执行文件和库文件。如果要编译出DAOS的rpm包，就需要这些依赖包的rpm包，所以建议提直接安装好这些依赖包，而不是选择自己去编译，毕竟这些依赖包也是直接从DAOS repo中获取的，DAOS已经给你编译好了，直接拿来用不好吗？

5. 编译

5.1. 编译DAOS

scons install --jobs 4  --config=force --build-deps=no

上述命令是编译DAOS的可执行文件和库文件，而且不需要编译第三方依赖。这些编译出来的文件最终会放在./intsall目录下。

5.2. 编译DAOS rpms

scons rpms --jobs 4  --config=force --build-deps=no

上述命令是编译DAOS的rpm包，而且不需要编译第三方依赖的rpm包。这些编译出来的rpm包最终会放在./utils/rpms/_topdir目录下。

5.3. 编译指定模块

目前DAOS只支持server、client、test模块。默认情况下，DAOS会编译所有模块，如果想要编译指定模块，可以使用scons install 模块类型的方式。下面是编译server模块的例子：

scons install server --jobs 4  --config=force --build-deps=no