# 9.5 使用pybind11構建C++和Python項目
**NOTE**:*此示例代碼可以在 https://github.com/dev-cafe/cmake-cookbook/tree/v1.0/chapter-9/recipe-05 中找到,其中有一個C++示例。該示例在CMake 3.11版(或更高版本)中是有效的,并且已經在GNU/Linux、macOS和Windows上進行過測試。*
前面的示例中,我們使用Boost.Python與C(C++)接口。本示例中,我們將嘗試使用pybind11將Python與C++接口。其實現利用了C++11的特性,因此需要支持C++11的編譯器。我們將演示在配置時如何獲取pybind11依賴和構建我們的項目,包括一個使用FetchContent方法的Python接口,我們在第4章第3節和第8章第4節中有過討論。在第11章第2節時,會通過PyPI發布一個用CMake/pybind11構建的C++/Python項目。屆時將重新討論這個例子,并展示如何打包它,使它可以用pip安裝。
## 準備工作
我們將保持`account.cpp`不變,只修改`account.cpp`:
```c++
#pragma once
#include <pybind11/pybind11.h>
class Account
{
public:
Account();
~Account();
void deposit(const double amount);
void withdraw(const double amount);
double get_balance() const;
private:
double balance;
};
namespace py = pybind11;
PYBIND11_MODULE(account, m)
{
py::class_<Account>(m, "Account")
.def(py::init())
.def("deposit", &Account::deposit)
.def("withdraw", &Account::withdraw)
.def("get_balance", &Account::get_balance);
}
```
按照pybind11文檔的方式,通過CMake構建(https://pybind11.readthedocs.io/en/stable/compile )。并使用`add_subdirectory`將pybind11導入項目。但是,不會將pybind11源代碼顯式地放到項目目錄中,而是演示如何在配置時使用`FetchContent` (https://cmake.org/cmake/help/v3.11/module/FetchContent.html )。
為了在下一個示例中更好地重用代碼,我們還將把所有源代碼放到子目錄中,并使用下面的項目布局:
```shell
.
├── account
│ ├── account.cpp
│ ├── account.hpp
│ ├── CMakeLists.txt
│ └── test.py
└── CMakeLists.txt
```
## 具體實施
讓我們詳細分析一下這個項目中,各個`CMakeLists.txt`文件的內容:
1. 主`CMakeLists.txt`文件:
```cmake
# define minimum cmake version
cmake_minimum_required(VERSION 3.11 FATAL_ERROR)
# project name and supported language
project(recipe-05 LANGUAGES CXX)
# require C++11
set(CMAKE_CXX_STANDARD 11)
set(CMAKE_CXX_EXTENSIONS OFF)
set(CMAKE_CXX_STANDARD_REQUIRED ON)
```
2. 這個文件中,查詢了用于測試的Python解釋器:
```cmake
find_package(PythonInterp REQUIRED)
```
3. 然后,包含`account`子目錄:
```cmake
add_subdirectory(account)
```
4. 定義單元測試:
```cmake
# turn on testing
enable_testing()
# define test
add_test(
NAME
python_test
COMMAND
${CMAKE_COMMAND} -E env ACCOUNT_MODULE_PATH=$<TARGET_FILE_DIR:account>
${PYTHON_EXECUTABLE} ${CMAKE_CURRENT_SOURCE_DIR}/account/test.py
)
```
5. `account/CMakeLists.txt `中,在配置時獲取pybind11的源碼:
```cmake
include(FetchContent)
FetchContent_Declare(
pybind11_sources
GIT_REPOSITORY https://github.com/pybind/pybind11.git
GIT_TAG v2.2
)
FetchContent_GetProperties(pybind11_sources)
if(NOT pybind11_sources_POPULATED)
FetchContent_Populate(pybind11_sources)
add_subdirectory(
${pybind11_sources_SOURCE_DIR}
${pybind11_sources_BINARY_DIR}
)
endif()
```
6. 最后,定義Python模塊。再次使用模塊選項`add_library`。并將庫目標的前綴和后綴屬性設置為`PYTHON_MODULE_PREFIX`和`PYTHON_MODULE_EXTENSION`,這兩個值由pybind11適當地推斷出來:
```cmake
add_library(account
MODULE
account.cpp
)
target_link_libraries(account
PUBLIC
pybind11::module
)
set_target_properties(account
PROPERTIES
PREFIX "${PYTHON_MODULE_PREFIX}"
SUFFIX "${PYTHON_MODULE_EXTENSION}"
)
```
7. 進行測試:
```shell
$ mkdir -p build
$ cd build
$ cmake ..
$ cmake --build .
$ ctest
Start 1: python_test
1/1 Test #1: python_test ...................... Passed 0.04 sec
100% tests passed, 0 tests failed out of 1
Total Test time (real) = 0.04 sec
```
## 工作原理
pybind11的功能和使用與Boost.Python非常類似。pybind11是一個更輕量級的依賴——不過需要編譯器支持C++11。` account.hpp`中的接口定義與之前的示例非常類似:
```c++
#include <pybind11/pybind11.h>
// ...
namespace py = pybind11;
PYBIND11_MODULE(account, m)
{
py::class_<Account>(m, "Account")
.def(py::init())
.def("deposit", &Account::deposit)
.def("withdraw", &Account::withdraw)
.def("get_balance", &Account::get_balance);
}
```
同樣,我們可以了解到Python方法是如何映射到C++函數的。解釋`PYBIND11_MODULE`庫是在導入的目標` pybind11::module `中定義,使用以下代碼包括了這個模塊:
```cmake
add_subdirectory(
${pybind11_sources_SOURCE_DIR}
${pybind11_sources_BINARY_DIR}
)
```
與之前的示例有兩個不同之處:
* 不需要在系統上安裝pybind11
* `${pybind11_sources_SOURCE_DIR}`子目錄,包含pybind11的`CMakelist.txt`中,在我們開始構建項目時,這個目錄并不存在
這個挑戰的解決方案是用`FetchContent`,在配置時獲取pybind11源代碼和CMake模塊,以便可以使用`add_subdirectory`引用。使用`FetchContent`模式,可以假設pybind11在構建樹中可用,并允許構建和鏈接Python模塊:
```cmake
add_library(account
MODULE
account.cpp
)
target_link_libraries(account
PUBLIC
pybind11::module
)
```
使用下面的命令,確保Python模塊庫得到一個定義良好的前綴和后綴,并與Python環境兼容:
```cmake
set_target_properties(account
PROPERTIES
PREFIX ${PYTHON_MODULE_PREFIX}
SUFFIX ${PYTHON_MODULE_EXTENSION}
)
```
主`CMakeLists.txt`文件的其余部分,都在執行測試(與前一個示例使用相同的`test.py`)。
## 更多信息
我們可以將pybind11源代碼包含在項目源代碼存儲庫中,這將簡化CMake結構,并消除在編譯時對pybind11源代碼進行網絡訪問的要求。或者,我們可以將pybind11源路徑定義為一個Git子模塊(https://git-scm.com/book/en/v2/Git-Tools-Submodules ),以應對pybind11源依賴項的更新。
在示例中,我們使用`FetchContent`解決了這個問題,它提供了一種非常緊湊的方法來引用CMake子項目,而不是顯式地跟蹤它的源代碼。同樣,我們也可以使用超級構建的方法來解決這個問題(參見第8章)。
要查看如何簡單函數、定義文檔注釋、映射內存緩沖區等進階閱讀,請參考pybind11文檔:https://pybind11.readthedocs.io
- Introduction
- 前言
- 第0章 配置環境
- 0.1 獲取代碼
- 0.2 Docker鏡像
- 0.3 安裝必要的軟件
- 0.4 測試環境
- 0.5 上報問題并提出改進建議
- 第1章 從可執行文件到庫
- 1.1 將單個源文件編譯為可執行文件
- 1.2 切換生成器
- 1.3 構建和鏈接靜態庫和動態庫
- 1.4 用條件句控制編譯
- 1.5 向用戶顯示選項
- 1.6 指定編譯器
- 1.7 切換構建類型
- 1.8 設置編譯器選項
- 1.9 為語言設定標準
- 1.10 使用控制流
- 第2章 檢測環境
- 2.1 檢測操作系統
- 2.2 處理與平臺相關的源代碼
- 2.3 處理與編譯器相關的源代碼
- 2.4 檢測處理器體系結構
- 2.5 檢測處理器指令集
- 2.6 為Eigen庫使能向量化
- 第3章 檢測外部庫和程序
- 3.1 檢測Python解釋器
- 3.2 檢測Python庫
- 3.3 檢測Python模塊和包
- 3.4 檢測BLAS和LAPACK數學庫
- 3.5 檢測OpenMP的并行環境
- 3.6 檢測MPI的并行環境
- 3.7 檢測Eigen庫
- 3.8 檢測Boost庫
- 3.9 檢測外部庫:Ⅰ. 使用pkg-config
- 3.10 檢測外部庫:Ⅱ. 自定義find模塊
- 第4章 創建和運行測試
- 4.1 創建一個簡單的單元測試
- 4.2 使用Catch2庫進行單元測試
- 4.3 使用Google Test庫進行單元測試
- 4.4 使用Boost Test進行單元測試
- 4.5 使用動態分析來檢測內存缺陷
- 4.6 預期測試失敗
- 4.7 使用超時測試運行時間過長的測試
- 4.8 并行測試
- 4.9 運行測試子集
- 4.10 使用測試固件
- 第5章 配置時和構建時的操作
- 5.1 使用平臺無關的文件操作
- 5.2 配置時運行自定義命令
- 5.3 構建時運行自定義命令:Ⅰ. 使用add_custom_command
- 5.4 構建時運行自定義命令:Ⅱ. 使用add_custom_target
- 5.5 構建時為特定目標運行自定義命令
- 5.6 探究編譯和鏈接命令
- 5.7 探究編譯器標志命令
- 5.8 探究可執行命令
- 5.9 使用生成器表達式微調配置和編譯
- 第6章 生成源碼
- 6.1 配置時生成源碼
- 6.2 使用Python在配置時生成源碼
- 6.3 構建時使用Python生成源碼
- 6.4 記錄項目版本信息以便報告
- 6.5 從文件中記錄項目版本
- 6.6 配置時記錄Git Hash值
- 6.7 構建時記錄Git Hash值
- 第7章 構建項目
- 7.1 使用函數和宏重用代碼
- 7.2 將CMake源代碼分成模塊
- 7.3 編寫函數來測試和設置編譯器標志
- 7.4 用指定參數定義函數或宏
- 7.5 重新定義函數和宏
- 7.6 使用廢棄函數、宏和變量
- 7.7 add_subdirectory的限定范圍
- 7.8 使用target_sources避免全局變量
- 7.9 組織Fortran項目
- 第8章 超級構建模式
- 8.1 使用超級構建模式
- 8.2 使用超級構建管理依賴項:Ⅰ.Boost庫
- 8.3 使用超級構建管理依賴項:Ⅱ.FFTW庫
- 8.4 使用超級構建管理依賴項:Ⅲ.Google Test框架
- 8.5 使用超級構建支持項目
- 第9章 語言混合項目
- 9.1 使用C/C++庫構建Fortran項目
- 9.2 使用Fortran庫構建C/C++項目
- 9.3 使用Cython構建C++和Python項目
- 9.4 使用Boost.Python構建C++和Python項目
- 9.5 使用pybind11構建C++和Python項目
- 9.6 使用Python CFFI混合C,C++,Fortran和Python
- 第10章 編寫安裝程序
- 10.1 安裝項目
- 10.2 生成輸出頭文件
- 10.3 輸出目標
- 10.4 安裝超級構建
- 第11章 打包項目
- 11.1 生成源代碼和二進制包
- 11.2 通過PyPI發布使用CMake/pybind11構建的C++/Python項目
- 11.3 通過PyPI發布使用CMake/CFFI構建C/Fortran/Python項目
- 11.4 以Conda包的形式發布一個簡單的項目
- 11.5 將Conda包作為依賴項發布給項目
- 第12章 構建文檔
- 12.1 使用Doxygen構建文檔
- 12.2 使用Sphinx構建文檔
- 12.3 結合Doxygen和Sphinx
- 第13章 選擇生成器和交叉編譯
- 13.1 使用CMake構建Visual Studio 2017項目
- 13.2 交叉編譯hello world示例
- 13.3 使用OpenMP并行化交叉編譯Windows二進制文件
- 第14章 測試面板
- 14.1 將測試部署到CDash
- 14.2 CDash顯示測試覆蓋率
- 14.3 使用AddressSanifier向CDash報告內存缺陷
- 14.4 使用ThreadSaniiser向CDash報告數據爭用
- 第15章 使用CMake構建已有項目
- 15.1 如何開始遷移項目
- 15.2 生成文件并編寫平臺檢查
- 15.3 檢測所需的鏈接和依賴關系
- 15.4 復制編譯標志
- 15.5 移植測試
- 15.6 移植安裝目標
- 15.7 進一步遷移的措施
- 15.8 項目轉換為CMake的常見問題
- 第16章 可能感興趣的書
- 16.1 留下評論——讓其他讀者知道你的想法