在本书中,我们已经使用了像 println! 这样的宏,但我们还没有完全探索宏是什么以及它是如何工作的。术语 指的是 Rust 中的一系列特性:使用 macro_rules!声明式宏和三种过程式

  • 自定义 #[derive] 宏,用于指定使用在结构体和枚举上的 derive 属性添加的代码
  • 属性式宏,用于定义可用于任何项的自定义属性
  • 函数式宏,看起来像函数调用,但操作的是指定为其参数的标记(tokens)

我们将依次讨论这些宏,但首先,让我们看看当我们已经有函数时,为什么还需要宏。

宏和函数之间的区别

从根本上说,宏是一种编写代码来生成其他代码的方式,这被称为元编程。在附录 C 中,我们讨论了 derive 属性,它可以为你生成各种 trait 的实现。我们在本书中也使用了 println!vec! 宏。所有这些宏都展开以产生比你手动编写的代码更多的代码。

元编程对于减少你必须编写和维护的代码量非常有用,这也是函数的作用之一。然而,宏具有函数不具备的一些额外能力。

函数签名必须声明函数拥有的参数的数量和类型。另一方面,宏可以接受可变数量的参数:我们可以用一个参数调用 println!("hello"),也可以用两个参数调用 println!("hello {} ", name)。此外,宏在编译器解释代码的含义之前展开,因此宏可以,例如,在给定类型上实现 trait。函数不能做到这一点,因为它在运行时被调用,而 trait 需要在编译时实现。

实现宏而不是函数的缺点是,宏定义比函数定义更复杂,因为你正在编写编写 Rust 代码的 Rust 代码。由于这种间接性,宏定义通常比函数定义更难阅读、理解和维护。

宏和函数之间的另一个重要区别是,你必须在文件中之前定义宏或将其引入作用域,才能调用它们,而函数可以定义在任何地方并在任何地方调用。

使用 macro_rules! 的声明式宏用于通用元编程

Rust 中最广泛使用的宏形式是声明式宏。这些宏有时也被称为“示例宏”、“macro_rules! 宏”或简称为“宏”。声明式宏的核心是允许你编写类似于 Rust match 表达式的东西。正如第 6 章讨论的那样,match 表达式是控制结构,它接受一个表达式,将表达式的结果值与模式进行比较,然后运行与匹配模式关联的代码。宏还将值与与特定代码关联的模式进行比较:在这种情况下,值是传递给宏的字面 Rust 源代码;模式与该源代码的结构进行比较;并且与每个模式关联的代码在匹配时替换传递给宏的代码。这一切都发生在编译期间。

要定义宏,你需要使用 macro_rules! 构造。让我们通过查看 vec! 宏是如何定义的来探索如何使用 macro_rules!。第 8 章介绍了我们如何使用 vec! 宏创建一个具有特定值的新 vector。例如,以下宏创建一个包含三个整数的新 vector

#![allow(unused)] fn main() { let v: Vec<u32> = vec![1, 2, 3]; }

我们也可以使用 vec! 宏来创建一个包含两个整数的 vector 或一个包含五个字符串切片的 vector。我们将无法使用函数来做同样的事情,因为我们事先不知道值的数量或类型。

列表 20-29 展示了 vec! 宏的一个稍微简化的定义。

文件名:src/lib.rs
#[macro_export] macro_rules! vec { ( $( $x:expr ),* ) => { { let mut temp_vec = Vec::new(); $( temp_vec.push($x); )* temp_vec } }; }
列表 20-29:vec! 宏定义的简化版本

注意:标准库中 vec! 宏的实际定义包含预先分配正确内存量的代码。该代码是一种优化,我们在这里不包括它,以使示例更简单。

#[macro_export] 注解表明,每当定义宏的 crate 被引入作用域时,都应该使此宏可用。如果没有此注解,则无法将宏引入作用域。

然后,我们以 macro_rules! 和我们正在定义的宏的名称(不带感叹号)开始宏定义。在这种情况下,名称 vec 后面跟着用花括号表示的宏定义的主体。

vec! 主体中的结构类似于 match 表达式的结构。这里我们有一个 arm,其模式为 ( $( $x:expr ),* ),后跟 => 和与此模式关联的代码块。如果模式匹配,则将发出关联的代码块。鉴于这是此宏中唯一的模式,因此只有一种有效的匹配方式;任何其他模式都会导致错误。更复杂的宏将有多个 arm。

宏定义中有效的模式语法与第 19 章中介绍的模式语法不同,因为宏模式是针对 Rust 代码结构而不是值进行匹配的。让我们逐步了解列表 20-29 中模式片段的含义;有关完整的宏模式语法,请参阅 Rust 参考手册

首先,我们使用一组括号来包含整个模式。我们使用美元符号 ($) 在宏系统中声明一个变量,该变量将包含与模式匹配的 Rust 代码。美元符号清楚地表明这是一个宏变量,而不是常规的 Rust 变量。接下来是一组括号,用于捕获与括号内模式匹配的值,以便在替换代码中使用。在 $() 内是 $x:expr,它匹配任何 Rust 表达式,并将表达式命名为 $x

$() 后面的逗号表示,在与 $() 内的代码匹配的每个代码实例之间,必须出现一个字面逗号分隔符。* 指定该模式匹配零个或多个 * 前面的任何内容。

当我们使用 vec![1, 2, 3]; 调用此宏时,$x 模式匹配三次,分别匹配三个表达式 123

现在让我们看看与此 arm 关联的代码主体中的模式:temp_vec.push()$()* 中生成,用于匹配模式中 $() 的每个部分,零次或多次,具体取决于模式匹配的次数。$x 被替换为每个匹配的表达式。当我们使用 vec![1, 2, 3]; 调用此宏时,替换此宏调用的生成的代码将是以下内容

{ let mut temp_vec = Vec::new(); temp_vec.push(1); temp_vec.push(2); temp_vec.push(3); temp_vec }

我们已经定义了一个宏,它可以接受任意数量的任何类型的参数,并且可以生成代码来创建一个包含指定元素的 vector。

要了解有关如何编写宏的更多信息,请查阅在线文档或其他资源,例如 Daniel Keep 发起,Lukas Wirth 继续维护的 《Rust 宏小册子》

用于从属性生成代码的过程式宏

第二种宏的形式是过程式宏,它更像一个函数(并且是一种过程)。过程式宏接受一些代码作为输入,对该代码进行操作,并生成一些代码作为输出,而不是像声明式宏那样与模式匹配并将代码替换为其他代码。过程式宏的三种类型是自定义 derive、属性式和函数式,它们都以类似的方式工作。

在创建过程式宏时,定义必须驻留在具有特殊 crate 类型的它们自己的 crate 中。这是出于复杂的技术原因,我们希望在未来消除这些原因。在列表 20-30 中,我们展示了如何定义过程式宏,其中 some_attribute 是使用特定宏变体的占位符。

文件名:src/lib.rs
use proc_macro; #[some_attribute] pub fn some_name(input: TokenStream) -> TokenStream { }
列表 20-30:定义过程式宏的示例

定义过程式宏的函数接受 TokenStream 作为输入,并生成 TokenStream 作为输出。TokenStream 类型由 Rust 附带的 proc_macro crate 定义,表示标记序列。这是宏的核心:宏正在操作的源代码构成输入 TokenStream,宏生成的代码是输出 TokenStream。该函数还附加了一个属性,用于指定我们正在创建的过程式宏的类型。我们可以在同一个 crate 中拥有多种类型的过程式宏。

让我们看看不同类型的过程式宏。我们将从自定义 derive 宏开始,然后解释使其他形式不同的细微差别。

如何编写自定义 derive

让我们创建一个名为 hello_macro 的 crate,它定义了一个名为 HelloMacro 的 trait,其中包含一个关联函数 hello_macro。与其让我们的用户为他们的每种类型实现 HelloMacro trait,不如我们提供一个过程式宏,以便用户可以使用 #[derive(HelloMacro)] 注解他们的类型,以获得 hello_macro 函数的默认实现。默认实现将打印 Hello, Macro! My name is TypeName!,其中 TypeName 是定义此 trait 的类型的名称。换句话说,我们将编写一个 crate,使另一个程序员能够使用我们的 crate 编写类似列表 20-31 的代码。

文件名:src/main.rs
use hello_macro::HelloMacro; use hello_macro_derive::HelloMacro; #[derive(HelloMacro)] struct Pancakes; fn main() { Pancakes::hello_macro(); }
列表 20-31:我们的 crate 的用户在使用我们的过程式宏时能够编写的代码

当我们完成时,此代码将打印 Hello, Macro! My name is Pancakes!。第一步是创建一个新的库 crate,像这样

$ cargo new hello_macro --lib

接下来,我们将定义 HelloMacro trait 及其关联函数

文件名:src/lib.rs
pub trait HelloMacro { fn hello_macro(); }

我们有一个 trait 及其函数。此时,我们的 crate 用户可以实现该 trait 以实现所需的功能,如下所示

use hello_macro::HelloMacro; struct Pancakes; impl HelloMacro for Pancakes { fn hello_macro() { println!("Hello, Macro! My name is Pancakes!"); } } fn main() { Pancakes::hello_macro(); }

但是,他们需要为他们想要与 hello_macro 一起使用的每种类型编写实现块;我们希望避免他们做这项工作。

此外,我们还不能为 hello_macro 函数提供默认实现,该默认实现将打印 trait 实现类型的名称:Rust 没有反射功能,因此它无法在运行时查找类型的名称。我们需要一个宏在编译时生成代码。

下一步是定义过程式宏。在撰写本文时,过程式宏需要位于它们自己的 crate 中。最终,此限制可能会被解除。crate 和宏 crate 的结构约定如下:对于名为 foo 的 crate,自定义 derive 过程式宏 crate 称为 foo_derive。让我们在我们的 hello_macro 项目中启动一个名为 hello_macro_derive 的新 crate

$ cargo new hello_macro_derive --lib

我们的两个 crate 紧密相关,因此我们在 hello_macro crate 的目录中创建过程式宏 crate。如果我们更改 hello_macro 中的 trait 定义,我们也必须更改 hello_macro_derive 中过程式宏的实现。这两个 crate 将需要单独发布,并且使用这些 crate 的程序员将需要将两者都添加为依赖项并将它们都引入作用域。相反,我们可以让 hello_macro crate 使用 hello_macro_derive 作为依赖项并重新导出过程式宏代码。但是,我们构建项目的方式使程序员即使不想要 derive 功能也可以使用 hello_macro

我们需要将 hello_macro_derive crate 声明为过程式宏 crate。我们还需要来自 synquote crate 的功能,正如你稍后将看到的那样,因此我们需要将它们添加为依赖项。将以下内容添加到 hello_macro_deriveCargo.toml 文件中

文件名:hello_macro_derive/Cargo.toml
[lib] proc-macro = true [dependencies] syn = "2.0" quote = "1.0"

要开始定义过程式宏,请将列表 20-32 中的代码放入 hello_macro_derive crate 的 src/lib.rs 文件中。请注意,在为 impl_hello_macro 函数添加定义之前,此代码将无法编译。

文件名:hello_macro_derive/src/lib.rs
use proc_macro::TokenStream; use quote::quote; #[proc_macro_derive(HelloMacro)] pub fn hello_macro_derive(input: TokenStream) -> TokenStream { // Construct a representation of Rust code as a syntax tree // that we can manipulate let ast = syn::parse(input).unwrap(); // Build the trait implementation impl_hello_macro(&ast) }
列表 20-32:大多数过程式宏 crate 将需要的代码,以便处理 Rust 代码

请注意,我们将代码拆分为 hello_macro_derive 函数(负责解析 TokenStream)和 impl_hello_macro 函数(负责转换语法树):这使编写过程式宏更加方便。外部函数(在本例中为 hello_macro_derive)中的代码对于你看到或创建的几乎每个过程式宏 crate 都是相同的。你在内部函数(在本例中为 impl_hello_macro)的主体中指定的代码将因你的过程式宏的用途而异。

我们引入了三个新的 crate:proc_macrosynquoteproc_macro crate 随 Rust 一起提供,因此我们无需将其添加到 Cargo.toml 中的依赖项中。proc_macro crate 是编译器的 API,允许我们从我们的代码中读取和操作 Rust 代码。

syn crate 将 Rust 代码从字符串解析为我们可以对其执行操作的数据结构。quote crate 将 syn 数据结构转换回 Rust 代码。这些 crate 使解析我们可能想要处理的任何类型的 Rust 代码变得更加简单:为 Rust 代码编写完整的解析器绝非易事。

当我们的库的用户在类型上指定 #[derive(HelloMacro)] 时,将调用 hello_macro_derive 函数。这是可能的,因为我们在此处使用 proc_macro_derive 注解了 hello_macro_derive 函数,并指定了名称 HelloMacro,该名称与我们的 trait 名称匹配;这是大多数过程式宏遵循的约定。

hello_macro_derive 函数首先将 inputTokenStream 转换为我们可以解释和执行操作的数据结构。这就是 syn 发挥作用的地方。syn 中的 parse 函数接受 TokenStream 并返回一个 DeriveInput 结构,表示解析后的 Rust 代码。列表 20-33 显示了我们从解析 struct Pancakes; 字符串获得的 DeriveInput 结构的相关部分

DeriveInput { // --snip-- ident: Ident { ident: "Pancakes", span: #0 bytes(95..103) }, data: Struct( DataStruct { struct_token: Struct, fields: Unit, semi_token: Some( Semi ) } ) }
列表 20-33:当我们解析在列表 20-31 中具有宏属性的代码时,我们获得的 DeriveInput 实例

此结构的字段表明我们解析的 Rust 代码是一个单元结构,其 ident(标识符,即名称)为 Pancakes。此结构上还有更多字段用于描述各种 Rust 代码;有关更多信息,请查看 syn 文档中的 DeriveInput

很快我们将定义 impl_hello_macro 函数,我们将在其中构建我们想要包含的新 Rust 代码。但在我们这样做之前,请注意我们的 derive 宏的输出也是一个 TokenStream。返回的 TokenStream 将添加到我们的 crate 用户编写的代码中,因此当他们编译他们的 crate 时,他们将获得我们在修改后的 TokenStream 中提供的额外功能。

你可能已经注意到,我们正在调用 unwrap 以便在调用 syn::parse 函数失败时导致 hello_macro_derive 函数 panic。我们的过程式宏必须在错误时 panic,这是必要的,因为 proc_macro_derive 函数必须返回 TokenStream 而不是 Result 才能符合过程式宏 API。我们通过使用 unwrap 简化了此示例;在生产代码中,你应该通过使用 panic!expect 提供有关出错原因的更具体的错误消息。

现在我们有了将带注解的 Rust 代码从 TokenStream 转换为 DeriveInput 实例的代码,让我们生成在带注解的类型上实现 HelloMacro trait 的代码,如列表 20-34 所示。

文件名:hello_macro_derive/src/lib.rs
use proc_macro::TokenStream; use quote::quote; #[proc_macro_derive(HelloMacro)] pub fn hello_macro_derive(input: TokenStream) -> TokenStream { // Construct a representation of Rust code as a syntax tree // that we can manipulate let ast = syn::parse(input).unwrap(); // Build the trait implementation impl_hello_macro(&ast) } fn impl_hello_macro(ast: &syn::DeriveInput) -> TokenStream { let name = &ast.ident; let gen = quote! { impl HelloMacro for #name { fn hello_macro() { println!("Hello, Macro! My name is {}!", stringify!(#name)); } } }; gen.into() }
列表 20-34:使用解析后的 Rust 代码实现 HelloMacro trait

我们使用 ast.ident 获取包含带注解类型的名称(标识符)的 Ident 结构实例。列表 20-33 中的结构显示,当我们在列表 20-31 中的代码上运行 impl_hello_macro 函数时,我们获得的 ident 将具有 ident 字段,其值为 "Pancakes"。因此,列表 20-34 中的 name 变量将包含一个 Ident 结构实例,当打印时,它将是字符串 "Pancakes",即列表 20-31 中结构体的名称。

quote! 宏允许我们定义我们想要返回的 Rust 代码。编译器期望与 quote! 宏执行的直接结果有所不同,因此我们需要将其转换为 TokenStream。我们通过调用 into 方法来做到这一点,该方法会消耗此中间表示并返回所需 TokenStream 类型的值。

quote! 宏还提供了一些非常酷的模板机制:我们可以输入 #namequote! 会将其替换为变量 name 中的值。你甚至可以进行一些类似于常规宏的工作方式的重复。查看 quote crate 的文档 以获得全面的介绍。

我们希望我们的过程式宏为用户注解的类型生成我们的 HelloMacro trait 的实现,我们可以通过使用 #name 来获得。trait 实现具有一个函数 hello_macro,其主体包含我们想要提供的功能:打印 Hello, Macro! My name is,然后是带注解类型的名称。

此处使用的 stringify! 宏内置于 Rust 中。它接受一个 Rust 表达式,例如 1 + 2,并在编译时将表达式转换为字符串字面量,例如 "1 + 2"。这与 format!println! 宏不同,后者评估表达式,然后将结果转换为 String#name 输入可能是一个要按字面打印的表达式,因此我们使用 stringify!。使用 stringify! 还可以通过在编译时将 #name 转换为字符串字面量来节省分配。

此时,cargo build 应该在 hello_macrohello_macro_derive 中都成功完成。让我们将这些 crate 连接到列表 20-31 中的代码,以查看过程式宏的实际效果!在你的 projects 目录中使用 cargo new pancakes 创建一个新的二进制项目。我们需要在 pancakes crate 的 Cargo.toml 中添加 hello_macrohello_macro_derive 作为依赖项。如果你要将你的 hello_macrohello_macro_derive 版本发布到 crates.io,它们将是常规依赖项;如果不是,你可以将它们指定为 path 依赖项,如下所示

hello_macro = { path = "../hello_macro" } hello_macro_derive = { path = "../hello_macro/hello_macro_derive" }

将列表 20-31 中的代码放入 src/main.rs,并运行 cargo run:它应该打印 Hello, Macro! My name is Pancakes!。来自过程式宏的 HelloMacro trait 的实现被包含在内,而 pancakes crate 不需要实现它;#[derive(HelloMacro)] 添加了 trait 实现。

接下来,让我们探索其他类型的过程式宏与自定义 derive 宏的不同之处。

属性式宏

属性式宏类似于自定义 derive 宏,但它们不是为 derive 属性生成代码,而是允许你创建新属性。它们也更灵活:derive 仅适用于结构体和枚举;属性也可以应用于其他项,例如函数。这是一个使用属性式宏的示例:假设你有一个名为 route 的属性,用于在使用 Web 应用程序框架时注解函数

#[route(GET, "/")] fn index() {

#[route] 属性将由框架定义为过程式宏。宏定义函数的签名如下所示

#[proc_macro_attribute] pub fn route(attr: TokenStream, item: TokenStream) -> TokenStream {

在这里,我们有两个 TokenStream 类型的参数。第一个用于属性的内容:GET, "/" 部分。第二个是属性附加到的项的主体:在本例中为 fn index() {} 和函数主体的其余部分。

除此之外,属性式宏的工作方式与自定义 derive 宏相同:你创建一个具有 proc-macro crate 类型的 crate,并实现一个生成你想要的代码的函数!

函数式宏

函数式宏定义看起来像函数调用的宏。与 macro_rules! 宏类似,它们比函数更灵活;例如,它们可以接受未知数量的参数。但是,macro_rules! 宏只能使用我们在 “使用 macro_rules! 的声明式宏用于通用元编程” 部分讨论的类似 match 的语法来定义更早。函数式宏接受 TokenStream 参数,它们的定义使用 Rust 代码来操作该 TokenStream,就像其他两种类型的过程式宏一样。函数式宏的一个示例是 sql! 宏,可以像这样调用

let sql = sql!(SELECT * FROM posts WHERE id=1);

此宏将解析其中的 SQL 语句,并检查其语法是否正确,这比 macro_rules! 宏可以做的处理复杂得多。sql! 宏的定义如下

#[proc_macro] pub fn sql(input: TokenStream) -> TokenStream {

此定义类似于自定义 derive 宏的签名:我们接收括号内的标记,并返回我们想要生成的代码。

总结

哇!现在你的工具箱中有一些 Rust 功能,你可能不会经常使用它们,但你会知道在非常特殊的情况下它们是可用的。我们介绍了一些复杂的主题,以便当你在错误消息建议或在其他人的代码中遇到它们时,你能够识别这些概念和语法。使用本章作为参考来指导你找到解决方案。

接下来,我们将把我们在本书中讨论的所有内容付诸实践,再做一个项目!