使用线程同时运行代码

ch16-01-threads.md
commit 8aecae3efe5ca8f79f055b70f05d9a3f990bce7b

在大部分现代操作系统中,已执行程序的代码在一个 进程process)中运行,操作系统则会负责管理多个进程。在程序内部,也可以拥有多个同时运行的独立部分。这些运行这些独立部分的功能被称为 线程threads)。例如,web 服务器可以有多个线程以便可以同时响应多个请求。

将程序中的计算拆分进多个线程可以改善性能,因为程序可以同时进行多个任务,不过这也会增加复杂性。因为线程是同时运行的,所以无法预先保证不同线程中的代码的执行顺序。这会导致诸如此类的问题:

  • 竞态条件(Race conditions),多个线程以不一致的顺序访问数据或资源
  • 死锁(Deadlocks),两个线程相互等待对方,这会阻止两者继续运行
  • 只会发生在特定情况且难以稳定重现和修复的 bug

Rust 尝试减轻使用线程的负面影响。不过在多线程上下文中编程仍需格外小心,同时其所要求的代码结构也不同于运行于单线程的程序。

编程语言有一些不同的方法来实现线程,而且很多操作系统提供了创建新线程的 API。Rust 标准库使用 1:1 线程实现,这代表程序的每一个语言级线程使用一个系统线程。有一些 crate 实现了其他有着不同于 1:1 模型取舍的线程模型。

使用 spawn 创建新线程

为了创建一个新线程,需要调用 thread::spawn 函数并传递一个闭包(第十三章学习了闭包),并在其中包含希望在新线程运行的代码。示例 16-1 中的例子在主线程打印了一些文本而另一些文本则由新线程打印:

文件名:src/main.rs

  1. use std::thread;
  2. use std::time::Duration;
  3. fn main() {
  4. thread::spawn(|| {
  5. for i in 1..10 {
  6. println!("hi number {i} from the spawned thread!");
  7. thread::sleep(Duration::from_millis(1));
  8. }
  9. });
  10. for i in 1..5 {
  11. println!("hi number {i} from the main thread!");
  12. thread::sleep(Duration::from_millis(1));
  13. }
  14. }

示例 16-1: 创建一个打印某些内容的新线程,但是主线程打印其它内容

注意当 Rust 程序的主线程结束时,新线程也会结束,而不管其是否执行完毕。这个程序的输出可能每次都略有不同,不过它大体上看起来像这样:

  1. hi number 1 from the main thread!
  2. hi number 1 from the spawned thread!
  3. hi number 2 from the main thread!
  4. hi number 2 from the spawned thread!
  5. hi number 3 from the main thread!
  6. hi number 3 from the spawned thread!
  7. hi number 4 from the main thread!
  8. hi number 4 from the spawned thread!
  9. hi number 5 from the spawned thread!

thread::sleep 调用强制线程停止执行一小段时间,这会允许其他不同的线程运行。这些线程可能会轮流运行,不过并不保证如此:这依赖操作系统如何调度线程。在这里,主线程首先打印,即便新创建线程的打印语句位于程序的开头,甚至即便我们告诉新建的线程打印直到 i 等于 9,它在主线程结束之前也只打印到了 5。

如果运行代码只看到了主线程的输出,或没有出现重叠打印的现象,尝试增大区间 (变量 i 的范围) 来增加操作系统切换线程的机会。

使用 join 等待所有线程结束

由于主线程结束,示例 16-1 中的代码大部分时候不光会提早结束新建线程,因为无法保证线程运行的顺序,我们甚至不能实际保证新建线程会被执行!

可以通过将 thread::spawn 的返回值储存在变量中来修复新建线程部分没有执行或者完全没有执行的问题。thread::spawn 的返回值类型是 JoinHandleJoinHandle 是一个拥有所有权的值,当对其调用 join 方法时,它会等待其线程结束。示例 16-2 展示了如何使用示例 16-1 中创建的线程的 JoinHandle 并调用 join 来确保新建线程在 main 退出前结束运行:

文件名:src/main.rs

  1. use std::thread;
  2. use std::time::Duration;
  3. fn main() {
  4. let handle = thread::spawn(|| {
  5. for i in 1..10 {
  6. println!("hi number {i} from the spawned thread!");
  7. thread::sleep(Duration::from_millis(1));
  8. }
  9. });
  10. for i in 1..5 {
  11. println!("hi number {i} from the main thread!");
  12. thread::sleep(Duration::from_millis(1));
  13. }
  14. handle.join().unwrap();
  15. }

示例 16-2: 从 thread::spawn 保存一个 JoinHandle 以确保该线程能够运行至结束

通过调用 handle 的 join 会阻塞当前线程直到 handle 所代表的线程结束。阻塞Blocking)线程意味着阻止该线程执行工作或退出。因为我们将 join 调用放在了主线程的 for 循环之后,运行示例 16-2 应该会产生类似这样的输出:

  1. hi number 1 from the main thread!
  2. hi number 2 from the main thread!
  3. hi number 1 from the spawned thread!
  4. hi number 3 from the main thread!
  5. hi number 2 from the spawned thread!
  6. hi number 4 from the main thread!
  7. hi number 3 from the spawned thread!
  8. hi number 4 from the spawned thread!
  9. hi number 5 from the spawned thread!
  10. hi number 6 from the spawned thread!
  11. hi number 7 from the spawned thread!
  12. hi number 8 from the spawned thread!
  13. hi number 9 from the spawned thread!

这两个线程仍然会交替执行,不过主线程会由于 handle.join() 调用会等待直到新建线程执行完毕。

不过让我们看看将 handle.join() 移动到 mainfor 循环之前会发生什么,如下:

文件名:src/main.rs

  1. use std::thread;
  2. use std::time::Duration;
  3. fn main() {
  4. let handle = thread::spawn(|| {
  5. for i in 1..10 {
  6. println!("hi number {i} from the spawned thread!");
  7. thread::sleep(Duration::from_millis(1));
  8. }
  9. });
  10. handle.join().unwrap();
  11. for i in 1..5 {
  12. println!("hi number {i} from the main thread!");
  13. thread::sleep(Duration::from_millis(1));
  14. }
  15. }

主线程会等待直到新建线程执行完毕之后才开始执行 for 循环,所以输出将不会交替出现,如下所示:

  1. hi number 1 from the spawned thread!
  2. hi number 2 from the spawned thread!
  3. hi number 3 from the spawned thread!
  4. hi number 4 from the spawned thread!
  5. hi number 5 from the spawned thread!
  6. hi number 6 from the spawned thread!
  7. hi number 7 from the spawned thread!
  8. hi number 8 from the spawned thread!
  9. hi number 9 from the spawned thread!
  10. hi number 1 from the main thread!
  11. hi number 2 from the main thread!
  12. hi number 3 from the main thread!
  13. hi number 4 from the main thread!

诸如将 join 放置于何处这样的小细节,会影响线程是否同时运行。

将 move 闭包与线程一同使用

move 关键字经常用于传递给 thread::spawn 的闭包,因为闭包会获取从环境中取得的值的所有权,因此会将这些值的所有权从一个线程传送到另一个线程。在第十三章 “闭包会捕获其环境” 部分讨论了闭包上下文中的 move。现在我们会更专注于 movethread::spawn 之间的交互。

在第十三章中,我们讲到可以在参数列表前使用 move 关键字强制闭包获取其使用的环境值的所有权。这个技巧在创建新线程将值的所有权从一个线程移动到另一个线程时最为实用。

注意示例 16-1 中传递给 thread::spawn 的闭包并没有任何参数:并没有在新建线程代码中使用任何主线程的数据。为了在新建线程中使用来自于主线程的数据,需要新建线程的闭包获取它需要的值。示例 16-3 展示了一个尝试在主线程中创建一个 vector 并用于新建线程的例子,不过这么写还不能工作,如下所示:

文件名:src/main.rs

  1. use std::thread;
  2. fn main() {
  3. let v = vec![1, 2, 3];
  4. let handle = thread::spawn(|| {
  5. println!("Here's a vector: {v:?}");
  6. });
  7. handle.join().unwrap();
  8. }

示例 16-3: 尝试在另一个线程使用主线程创建的 vector

闭包使用了 v,所以闭包会捕获 v 并使其成为闭包环境的一部分。因为 thread::spawn 在一个新线程中运行这个闭包,所以可以在新线程中访问 v。然而当编译这个例子时,会得到如下错误:

  1. $ cargo run
  2. Compiling threads v0.1.0 (file:///projects/threads)
  3. error[E0373]: closure may outlive the current function, but it borrows `v`, which is owned by the current function
  4. --> src/main.rs:6:32
  5. |
  6. 6 | let handle = thread::spawn(|| {
  7. | ^^ may outlive borrowed value `v`
  8. 7 | println!("Here's a vector: {v:?}");
  9. | - `v` is borrowed here
  10. |
  11. note: function requires argument type to outlive `'static`
  12. --> src/main.rs:6:18
  13. |
  14. 6 | let handle = thread::spawn(|| {
  15. | __________________^
  16. 7 | | println!("Here's a vector: {v:?}");
  17. 8 | | });
  18. | |______^
  19. help: to force the closure to take ownership of `v` (and any other referenced variables), use the `move` keyword
  20. |
  21. 6 | let handle = thread::spawn(move || {
  22. | ++++
  23. For more information about this error, try `rustc --explain E0373`.
  24. error: could not compile `threads` (bin "threads") due to 1 previous error

Rust 会 推断 如何捕获 v,因为 println! 只需要 v 的引用,闭包尝试借用 v。然而这有一个问题:Rust 不知道这个新建线程会执行多久,所以无法知晓对 v 的引用是否一直有效。

示例 16-4 展示了一个 v 的引用很有可能不再有效的场景:

文件名:src/main.rs

  1. use std::thread;
  2. fn main() {
  3. let v = vec![1, 2, 3];
  4. let handle = thread::spawn(|| {
  5. println!("Here's a vector: {v:?}");
  6. });
  7. drop(v); // oh no!
  8. handle.join().unwrap();
  9. }

示例 16-4: 一个具有闭包的线程,尝试使用一个在主线程中被回收的引用 v

如果 Rust 允许这段代码运行,则新建线程则可能会立刻被转移到后台并完全没有机会运行。新建线程内部有一个 v 的引用,不过主线程立刻就使用第十五章讨论的 drop 丢弃了 v。接着当新建线程开始执行,v 已不再有效,所以其引用也是无效的。噢,这太糟了!

为了修复示例 16-3 的编译错误,我们可以听取错误信息的建议:

  1. help: to force the closure to take ownership of `v` (and any other referenced variables), use the `move` keyword
  2. |
  3. 6 | let handle = thread::spawn(move || {
  4. | ++++

通过在闭包之前增加 move 关键字,我们强制闭包获取其使用的值的所有权,而不是任由 Rust 推断它应该借用值。示例 16-5 中展示的对示例 16-3 代码的修改,可以按照我们的预期编译并运行:

文件名:src/main.rs

  1. use std::thread;
  2. fn main() {
  3. let v = vec![1, 2, 3];
  4. let handle = thread::spawn(move || {
  5. println!("Here's a vector: {v:?}");
  6. });
  7. handle.join().unwrap();
  8. }

示例 16-5: 使用 move 关键字强制获取它使用的值的所有权

我们可能希望尝试同样的方法来修复示例 16-4 中的代码,其主线程使用 move 闭包调用了 drop。然而这个修复行不通,因为示例 16-4 所尝试的操作由于一个不同的原因而不被允许。如果为闭包增加 move,将会把 v 移动进闭包的环境中,如此将不能在主线程中对其调用 drop 了。我们会得到如下不同的编译错误:

  1. $ cargo run
  2. Compiling threads v0.1.0 (file:///projects/threads)
  3. error[E0382]: use of moved value: `v`
  4. --> src/main.rs:10:10
  5. |
  6. 4 | let v = vec![1, 2, 3];
  7. | - move occurs because `v` has type `Vec<i32>`, which does not implement the `Copy` trait
  8. 5 |
  9. 6 | let handle = thread::spawn(move || {
  10. | ------- value moved into closure here
  11. 7 | println!("Here's a vector: {v:?}");
  12. | - variable moved due to use in closure
  13. ...
  14. 10 | drop(v); // oh no!
  15. | ^ value used here after move
  16. For more information about this error, try `rustc --explain E0382`.
  17. error: could not compile `threads` (bin "threads") due to 1 previous error

Rust 的所有权规则又一次帮助了我们!示例 16-3 中的错误是因为 Rust 是保守的并只会为线程借用 v,这意味着主线程理论上可能使新建线程的引用无效。通过告诉 Rust 将 v 的所有权移动到新建线程,我们向 Rust 保证主线程不会再使用 v。如果对示例 16-4 也做出如此修改,那么当在主线程中使用 v 时就会违反所有权规则。 move 关键字覆盖了 Rust 默认保守的借用,但它不允许我们违反所有权规则。

现在我们对线程和线程 API 有了基本的了解,让我们讨论一下使用线程实际可以 什么吧。