macros.md


commit 7eb4469a002172af9b954d13c35753a55925de7f

到目前为止你已经学到了不少 Rust 提供的抽象和重用代码的工具了。这些代码重用单元有丰富的语义结构。例如,函数有类型签名,类型参数有特性限制并且能重载的函数必须属于一个特定的特性。

这些结构意味着 Rust 核心抽象拥有强大的编译时正确性检查。不过作为代价的是灵活性的减少。如果你识别出一个重复代码的模式,你会发现把它们解释为泛型函数,特性或者任何Rust语义中的其它结构很难或者很麻烦。

宏允许我们在句法水平上进行抽象。宏是一个“展开后的”句法形式的速记。这个展开发生在编译的早期,在任何静态检查之前。因此,宏可以实现很多 Rust 核心抽象不能做到的代码重用模式。

缺点是基于宏的代码更难懂,因为它很少利用 Rust 的内建规则。就像常规函数,一个良好的宏可以在不知道其实现的情况下使用。然而,设计一个良好的宏困难的!另外,在宏中的编译错误更难解释,因为它在展开后的代码上描述问题,不是在开发者使用的代码级别。

这些缺点让宏成了所谓“最后求助于的功能”。这并不是说宏的坏话;只是因为它是 Rust 中需要真正简明,良好抽象的代码的部分。切记权衡取舍。

定义一个宏

你可能见过vec!宏。用来初始化一个任意数量元素的vector

  1. let x: Vec<u32> = vec![1, 2, 3];
  2. # assert_eq!(x, [1, 2, 3]);

这不可能是一个常规函数,因为它可以接受任何数量的参数。不过我们可以想象的到它是这些代码的句法简写:

  1. let x: Vec<u32> = {
  2. let mut temp_vec = Vec::new();
  3. temp_vec.push(1);
  4. temp_vec.push(2);
  5. temp_vec.push(3);
  6. temp_vec
  7. };
  8. # assert_eq!(x, [1, 2, 3]);

我们可以使用宏来实现这么一个简写:[^实际上]

  1. macro_rules! vec {
  2. ( $( $x:expr ),* ) => {
  3. {
  4. let mut temp_vec = Vec::new();
  5. $(
  6. temp_vec.push($x);
  7. )*
  8. temp_vec
  9. }
  10. };
  11. }
  12. # fn main() {
  13. # assert_eq!(vec![1,2,3], [1, 2, 3]);
  14. # }

哇哦,这里有好多新语法!让我们分开来看。

  1. macro_rules! vec { ... }

这里我们定义了一个叫做vec的宏,跟用fn vec定义一个vec函数很相似。再罗嗦一句,我们通常写宏的名字时带上一个感叹号,例如vec!。感叹号是调用语法的一部分用来区别宏和常规函数。

匹配

宏通过一系列规则定义,它们是模式匹配的分支。上面我们有:

  1. ( $( $x:expr ),* ) => { ... };

这就像一个match表达式分支,不过匹配发生在编译时 Rust 的语法树中。最后一个分支(这里只有一个分支)的分号是可选的。=>左侧的“模式”叫匹配器matcher)。它有自己的语法

$x:expr匹配器将会匹配任何 Rust 表达式,把它的语法树绑定到元变量$x上。expr标识符是一个片段分类符fragment specifier)。在宏进阶章节(已被本章合并,坐等官方文档更新)中列举了所有可能的分类符。匹配器写在$(...)中,*会匹配 0 个或多个表达式,表达式之间用逗号分隔。

除了特殊的匹配器语法,任何出现在匹配器中的 Rust 标记必须完全相符。例如:

  1. macro_rules! foo {
  2. (x => $e:expr) => (println!("mode X: {}", $e));
  3. (y => $e:expr) => (println!("mode Y: {}", $e));
  4. }
  5. fn main() {
  6. foo!(y => 3);
  7. }

将会打印:

  1. mode Y: 3

而这个:

  1. foo!(z => 3);

我们会得到编译错误:

  1. error: no rules expected the token `z`

展开

宏规则的右边是正常的 Rust 语法,大部分是。不过我们可以拼接一些匹配器中的语法。例如最开始的例子:

  1. $(
  2. temp_vec.push($x);
  3. )*

每个匹配的$x表达式都会在宏展开中产生一个单独push语句。展开中的重复与匹配器中的重复“同步”进行(稍后介绍更多)。

因为$x已经在表达式匹配中声明了,我们并不在右侧重复:expr。另外,我们并不将用来分隔的逗号作为重复操作的一部分。相反,我们在重复块中使用一个结束用的分号。

另一个细节:vec!宏的右侧有两对大括号。它们经常像这样结合起来:

  1. macro_rules! foo {
  2. () => {{
  3. ...
  4. }}
  5. }

外层的大括号是macro_rules!语法的一部分。事实上,你也可以()或者[]。它们只是用来界定整个右侧结构的。

内层大括号是展开语法的一部分。记住,vec!在表达式上下文中使用。要写一个包含多个语句,包括let绑定,的表达式,我们需要使用块。如果你的宏只展开一个单独的表达式,你不需要内层的大括号。

注意我们从未声明宏产生一个表达式。事实上,直到宏被展开之前我们都无法知道。足够小心的话,你可以编写一个能在多个上下文中展开的宏。例如,一个数据类型的简写可以作为一个表达式或一个模式。

重复(Repetition)

重复运算符遵循两个原则:

  1. $(...)*对它包含的所有$name都执行“一层”重复
  2. 每个$name必须有至少这么多的$(...)*与其相对。如果多了,它将是多余的。

这个巴洛克宏展示了外层重复中多余的变量。

  1. macro_rules! o_O {
  2. (
  3. $(
  4. $x:expr; [ $( $y:expr ),* ]
  5. );*
  6. ) => {
  7. &[ $($( $x + $y ),*),* ]
  8. }
  9. }
  10. fn main() {
  11. let a: &[i32]
  12. = o_O!(10; [1, 2, 3];
  13. 20; [4, 5, 6]);
  14. assert_eq!(a, [11, 12, 13, 24, 25, 26]);
  15. }

这就是匹配器的大部分语法。这些例子使用了$(...)*,它指“0次或多次”匹配。另外你可以用$(...)+代表“1次或多次”匹配。每种形式都可以包括一个分隔符,分隔符可以使用任何除了+*的符号。

这个系统基于Macro-by-Example(PDF链接)。

卫生(Hygiene)

一些语言使用简单的文本替换来实现宏,它导致了很多问题。例如,这个C程序打印13而不是期望的25

  1. #define FIVE_TIMES(x) 5 * x
  2. int main() {
  3. printf("%d\n", FIVE_TIMES(2 + 3));
  4. return 0;
  5. }

展开之后我们得到5 * 2 + 3,并且乘法比加法有更高的优先级。如果你经常使用C的宏,你可能知道标准的习惯来避免这个问题,或更多其它的问题。在 Rust 中,你不需要担心这个问题。

  1. macro_rules! five_times {
  2. ($x:expr) => (5 * $x);
  3. }
  4. fn main() {
  5. assert_eq!(25, five_times!(2 + 3));
  6. }

元变量$x被解析成一个单独的表达式节点,并且在替换后依旧在语法树中保持原值。

宏系统中另一个常见的问题是变量捕捉variable capture)。这里有一个C的宏,使用了GNU C 扩展来模拟Rust表达式块。

  1. #define LOG(msg) ({ \
  2. int state = get_log_state(); \
  3. if (state > 0) { \
  4. printf("log(%d): %s\n", state, msg); \
  5. } \
  6. })

这是一个非常糟糕的用例:

  1. const char *state = "reticulating splines";
  2. LOG(state)

它展开为:

  1. const char *state = "reticulating splines";
  2. {
  3. int state = get_log_state();
  4. if (state > 0) {
  5. printf("log(%d): %s\n", state, state);
  6. }
  7. }

第二个叫做state的参数参数被替换为了第一个。当打印语句需要用到这两个参数时会出现问题。

等价的Rust宏则会有理想的表现:

  1. # fn get_log_state() -> i32 { 3 }
  2. macro_rules! log {
  3. ($msg:expr) => {{
  4. let state: i32 = get_log_state();
  5. if state > 0 {
  6. println!("log({}): {}", state, $msg);
  7. }
  8. }};
  9. }
  10. fn main() {
  11. let state: &str = "reticulating splines";
  12. log!(state);
  13. }

这之所以能工作时因为 Rust 有一个卫生宏系统。每个宏展开都在一个不同的语法上下文syntax context)中,并且每个变量在引入的时候都在语法上下文中打了标记。这就好像是main中的state和宏中的state被画成了不同的“颜色”,所以它们不会冲突。

这也限制了宏在被执行时引入新绑定的能力。像这样的代码是不能工作的:

  1. macro_rules! foo {
  2. () => (let x = 3;);
  3. }
  4. fn main() {
  5. foo!();
  6. println!("{}", x);
  7. }

相反你需要在执行时传递变量的名字,这样它会在语法上下文中被正确标记。

  1. macro_rules! foo {
  2. ($v:ident) => (let $v = 3;);
  3. }
  4. fn main() {
  5. foo!(x);
  6. println!("{}", x);
  7. }

这对let绑定和 loop 标记有效,对items无效。所以下面的代码可以编译:

  1. macro_rules! foo {
  2. () => (fn x() { });
  3. }
  4. fn main() {
  5. foo!();
  6. x();
  7. }

递归宏

一个宏展开中可以包含更多的宏,包括被展开的宏自身。这种宏对处理树形结构输入时很有用的,正如这这个(简化了的)HTML简写所展示的那样:

  1. # #![allow(unused_must_use)]
  2. macro_rules! write_html {
  3. ($w:expr, ) => (());
  4. ($w:expr, $e:tt) => (write!($w, "{}", $e));
  5. ($w:expr, $tag:ident [ $($inner:tt)* ] $($rest:tt)*) => {{
  6. write!($w, "<{}>", stringify!($tag));
  7. write_html!($w, $($inner)*);
  8. write!($w, "</{}>", stringify!($tag));
  9. write_html!($w, $($rest)*);
  10. }};
  11. }
  12. fn main() {
  13. # // FIXME(#21826)
  14. use std::fmt::Write;
  15. let mut out = String::new();
  16. write_html!(&mut out,
  17. html[
  18. head[title["Macros guide"]]
  19. body[h1["Macros are the best!"]]
  20. ]);
  21. assert_eq!(out,
  22. "<html><head><title>Macros guide</title></head>\
  23. <body><h1>Macros are the best!</h1></body></html>");
  24. }

调试宏代码

运行rustc --pretty expanded来查看宏展开后的结果。输出表现为一个完整的包装箱,所以你可以把它反馈给rustc,它会有时会比原版产生更好的错误信息。注意如果在同一作用域中有多个相同名字(不过在不同的语法上下文中)的变量的话--pretty expanded的输出可能会有不同的意义。这种情况下--pretty expanded,hygiene将会告诉你有关语法上下文的信息。

rustc提供两种语法扩展来帮助调试宏。目前为止,它们是不稳定的并且需要功能入口(feature gates)。

  • log_syntax!(...)会打印它的参数到标准输出,在编译时,并且不“展开”任何东西。
  • trace_macros!(true)每当一个宏被展开时会启用一个编译器信息。在展开后使用trace_macros!(false)来关闭它。

句法要求

即使 Rust 代码中含有未展开的宏,它也可以被解析为一个完整的语法树。这个属性对于编辑器或其它处理代码的工具来说十分有用。这里也有一些关于 Rust 宏系统设计的推论。

一个推论是 Rust 必须确定,当它解析一个宏展开时,宏是否代替了

  • 0个或多个项
  • 0个或多个方法
  • 一个表达式
  • 一个语句
  • 一个模式

一个块中的宏展开代表一些项,或者一个表达式/语句。Rust 使用一个简单的规则来解决这些二义性。一个代表项的宏展开必须是

  • 用大括号界定的,例如foo! { ... }
  • 分号结尾的,例如foo!(...);

另一个展开前解析的推论是宏展开必须包含有效的Rust记号。更进一步,括号,中括号,大括号在宏展开中必须是封闭的。例如,foo!([)是不允许的。这让Rust知道宏何时结束。

更正式一点,宏展开体必须是一个记号树token trees)的序列。一个记号树是一系列递归的

  • 一个由()[]{}包围的记号树序列
  • 任何其它单个记号

在一个匹配器中,每一个元变量都有一个片段分类符fragment specifier),确定它匹配的哪种句法。

  • ident:一个标识符。例如:xfoo
  • path:一个受限的名字。例如:T::SpecialA
  • expr:一个表达式。例如:2 + 2if true then { 1 } else { 2 }f(42)
  • ty:一个类型。例如:i32Vec<(char, String)>&T
  • pat:一个模式。例如:Some(t)(17, 'a')_
  • stmt:一个单独语句。例如:let x = 3
  • block:一个大括号界定的语句序列,或者一个表达式。例如:{ log(error, "hi"); return 12; }
  • item:一个。例如:fn foo() { }struct Bar
  • meta:一个“元数据项”,可以在属性中找到。例如:cfg(target_os = "windows")
  • tt:一个单独的记号树

对于一个元变量(metavariable)后面的一个记号有一些额外的规则:

  • exprstmt变量必须后跟任意一个:=> , ;
  • typath变量必须后跟任意一个:=> , = | ; : > [ { as where
  • pat变量必须后跟任意一个:=> , = | if in
  • 其它变量可以后跟任何记号

这些规则为 Rust 语法提供了一些灵活性以便将来的展开不会破坏现有的宏。

宏系统完全不处理解析模糊。例如,$($i:ident)* $e:expr语法总是会解析失败,因为解析器会被强制在解析$i和解析$e之间做出选择。改变展开在它们之前分别加上一个记号可以解决这个问题。在这个例子中,你可以写成$(I $i:ident)* E $e:expr

范围和宏导入/导出

宏在编译的早期阶段被展开,在命名解析之前。这有一个缺点是与语言中其它结构相比,范围对宏的作用不一样。

定义和展开都发生在同一个深度优先、字典顺序的包装箱的代码遍历中。那么在模块范围内定义的宏对同模块的接下来的代码是可见的,这包括任何接下来的子mod项。

一个定义在fn函数体内的宏,或者任何其它不在模块范围内的地方,只在它的范围内可见。

如果一个模块有macro_use属性,它的宏在子mod项之后的父模块也是可见的。如果它的父模块也有macro_use属性那么在父mod项之后的祖父模块中也是可见的,以此类推。

macro_use属性也可以出现在extern crate处。在这个上下文中它控制那些宏从外部包装箱中装载,例如

  1. #[macro_use(foo, bar)]
  2. extern crate baz;

如果属性只是简单的写成#[macro_use],所有的宏都会被装载。如果没有#[macro_use]属性那么没有宏被装载。只有被定义为#[macro_export]的宏可能被装载。

装载一个包装箱的宏而不链接到输出,使用#[no_link]

一个例子:

  1. macro_rules! m1 { () => (()) }
  2. // Visible here: `m1`.
  3. mod foo {
  4. // Visible here: `m1`.
  5. #[macro_export]
  6. macro_rules! m2 { () => (()) }
  7. // Visible here: `m1`, `m2`.
  8. }
  9. // Visible here: `m1`.
  10. macro_rules! m3 { () => (()) }
  11. // Visible here: `m1`, `m3`.
  12. #[macro_use]
  13. mod bar {
  14. // Visible here: `m1`, `m3`.
  15. macro_rules! m4 { () => (()) }
  16. // Visible here: `m1`, `m3`, `m4`.
  17. }
  18. // Visible here: `m1`, `m3`, `m4`.
  19. # fn main() { }

当这个库被用#[macro_use] extern crate装载时,只有m2会被导入。

Rust参考中有一个宏相关的属性列表

$crate变量

当一个宏在多个包装箱中使用时会产生另一个困难。来看mylib定义了

  1. pub fn increment(x: u32) -> u32 {
  2. x + 1
  3. }
  4. #[macro_export]
  5. macro_rules! inc_a {
  6. ($x:expr) => ( ::increment($x) )
  7. }
  8. #[macro_export]
  9. macro_rules! inc_b {
  10. ($x:expr) => ( ::mylib::increment($x) )
  11. }
  12. # fn main() { }

inc_a只能在mylib内工作,同时inc_b只能在库外工作。进一步说,如果用户有另一个名字导入mylibinc_b将不能工作。

Rust(目前)还没有针对包装箱引用的卫生系统,不过它确实提供了一个解决这个问题的变通方法。当从一个叫foo的包装箱总导入宏时,特殊宏变量$crate会展开为::foo。相反,当这个宏在同一包装箱内定义和使用时,$crate将展开为空。这意味着我们可以写

  1. #[macro_export]
  2. macro_rules! inc {
  3. ($x:expr) => ( $crate::increment($x) )
  4. }
  5. # fn main() { }

来定义一个可以在库内外都能用的宏。这个函数名字会展开为::increment::mylib::increment

为了保证这个系统简单和正确,#[macro_use] extern crate ...应只出现在你包装箱的根中,而不是在mod中。

深入(The deep end)

之前的介绍章节提到了递归宏,但并没有给出完整的介绍。还有一个原因令递归宏是有用的:每一次递归都给你匹配宏参数的机会。

作为一个极端的例子,可以,但极端不推荐,用Rust宏系统来实现一个位循环标记自动机。

  1. macro_rules! bct {
  2. // cmd 0: d ... => ...
  3. (0, $($ps:tt),* ; $_d:tt)
  4. => (bct!($($ps),*, 0 ; ));
  5. (0, $($ps:tt),* ; $_d:tt, $($ds:tt),*)
  6. => (bct!($($ps),*, 0 ; $($ds),*));
  7. // cmd 1p: 1 ... => 1 ... p
  8. (1, $p:tt, $($ps:tt),* ; 1)
  9. => (bct!($($ps),*, 1, $p ; 1, $p));
  10. (1, $p:tt, $($ps:tt),* ; 1, $($ds:tt),*)
  11. => (bct!($($ps),*, 1, $p ; 1, $($ds),*, $p));
  12. // cmd 1p: 0 ... => 0 ...
  13. (1, $p:tt, $($ps:tt),* ; $($ds:tt),*)
  14. => (bct!($($ps),*, 1, $p ; $($ds),*));
  15. // Halt on empty data string:
  16. ( $($ps:tt),* ; )
  17. => (());
  18. }

练习:使用宏来减少上面bct!宏定义中的重复。

常用宏(Common macros)

这里有一些你会在Rust代码中看到的常用宏。

panic!

这个宏导致当前线程恐慌。你可以传给这个宏一个信息通过:

  1. panic!("oh no!");

vec!

vec!的应用遍及本书,所以你可能已经见过它了。它方便创建Vec<T>

  1. let v = vec![1, 2, 3, 4, 5];

它也让你可以用重复值创建vector。例如,100个0

  1. let v = vec![0; 100];

assert!assert_eq!

这两个宏用在测试中。assert!获取一个布尔值,而assert_eq!获取两个值并比较它们。true 就通过,falsepanic!。像这样:

  1. // A-ok!
  2. assert!(true);
  3. assert_eq!(5, 3 + 2);
  4. // Nope :(
  5. assert!(5 < 3);
  6. assert_eq!(5, 3);

try!

try!用来进行错误处理。它获取一些可以返回Result<T, E>的数据,并返回T如果它是Ok<T>,或return一个Err(E)如果出错了。像这样:

  1. use std::fs::File;
  2. fn foo() -> std::io::Result<()> {
  3. let f = try!(File::create("foo.txt"));
  4. Ok(())
  5. }

它比这么写要更简明:

  1. use std::fs::File;
  2. fn foo() -> std::io::Result<()> {
  3. let f = File::create("foo.txt");
  4. let f = match f {
  5. Ok(t) => t,
  6. Err(e) => return Err(e),
  7. };
  8. Ok(())
  9. }

unreachable!

这个宏用于当你认为一些代码不应该被执行的时候:

  1. if false {
  2. unreachable!();
  3. }

有时,编译器可能会让你编写一个你认为将永远不会执行的不同分支。在这个例子中,用这个宏,这样如果最终你错了,你会为此得到一个panic!

  1. let x: Option<i32> = None;
  2. match x {
  3. Some(_) => unreachable!(),
  4. None => println!("I know x is None!"),
  5. }

unimplemented!

unimplemented!宏可以被用来当你尝试去让你的函数通过类型检查,同时你又不想操心去写函数体的时候。一个这种情况的例子是实现一个要求多个方法的特性,而你只想一次搞定一个。用unimplemented!定义其它的直到你准备好去写它们了。

宏程序(Procedural macros)

如果Rust宏系统不能做你想要的,你可能想要写一个编译器插件。与macro_rules!宏相比,它能做更多的事,接口也更不稳定,并且bug将更难以追踪。相反你得到了可以在编译器中运行任意Rust代码的灵活性。为此语法扩展插件有时被称为宏程序procedural macros)。


[^实际上]: vec!在 libcollections 中的实际定义跟这里的表现并不相同,出于效率和复用的考虑。