5.7. 使用重复元素的网络（VGG）

AlexNet在LeNet的基础上增加了3个卷积层。但AlexNet作者对它们的卷积窗口、输出通道数和构造顺序均做了大量的调整。虽然AlexNet指明了深度卷积神经网络可以取得出色的结果，但并没有提供简单的规则以指导后来的研究者如何设计新的网络。我们将在本章的后续几节里介绍几种不同的深度网络设计思路。

本节介绍VGG，它的名字来源于论文作者所在的实验室Visual Geometry Group[1]。VGG提出了可以通过重复使用简单的基础块来构建深度模型的思路。

5.7.1. VGG块

VGG块的组成规律是：连续使用数个相同的填充为1、窗口形状为

5.7. 使用重复元素的网络（VGG） - 图1 的卷积层后接上一个步幅为2、窗口形状为 5.7. 使用重复元素的网络（VGG） - 图2 的最大池化层。卷积层保持输入的高和宽不变，而池化层则对其减半。我们使用vgg_block函数来实现这个基础的VGG块，它可以指定卷积层的数量num_convs和输出通道数num_channels。

  1. In [1]:
  1. import d2lzh as d2l
  2. from mxnet import gluon, init, nd
  3. from mxnet.gluon import nn
  4.  
  5. def vgg_block(num_convs, num_channels):
  6.     blk = nn.Sequential()
  7.     for _ in range(num_convs):
  8.         blk.add(nn.Conv2D(num_channels, kernel_size=3,
  9.                           padding=1, activation='relu'))
  10.     blk.add(nn.MaxPool2D(pool_size=2, strides=2))
  11.     return blk

5.7.2. VGG网络

与AlexNet和LeNet一样，VGG网络由卷积层模块后接全连接层模块构成。卷积层模块串联数个vgg_block，其超参数由变量conv_arch定义。该变量指定了每个VGG块里卷积层个数和输出通道数。全连接模块则跟AlexNet中的一样。

现在我们构造一个VGG网络。它有5个卷积块，前2块使用单卷积层，而后3块使用双卷积层。第一块的输出通道是64，之后每次对输出通道数翻倍，直到变为512。因为这个网络使用了8个卷积层和3个全连接层，所以经常被称为VGG-11。

  1. In [2]:
  1. conv_arch = ((1, 64), (1, 128), (2, 256), (2, 512), (2, 512))

下面我们实现VGG-11。

  1. In [3]:
  1. def vgg(conv_arch):
  2.     net = nn.Sequential()
  3.     # 卷积层部分
  4.     for (num_convs, num_channels) in conv_arch:
  5.         net.add(vgg_block(num_convs, num_channels))
  6.     # 全连接层部分
  7.     net.add(nn.Dense(4096, activation='relu'), nn.Dropout(0.5),
  8.             nn.Dense(4096, activation='relu'), nn.Dropout(0.5),
  9.             nn.Dense(10))
  10.     return net
  11.  
  12. net = vgg(conv_arch)

下面构造一个高和宽均为224的单通道数据样本来观察每一层的输出形状。

  1. In [4]:
  1. net.initialize()
  2. X = nd.random.uniform(shape=(1, 1, 224, 224))
  3. for blk in net:
  4.     X = blk(X)
  5.     print(blk.name, 'output shape:\t', X.shape)
  1. sequential1 output shape:        (1, 64, 112, 112)
  2. sequential2 output shape:        (1, 128, 56, 56)
  3. sequential3 output shape:        (1, 256, 28, 28)
  4. sequential4 output shape:        (1, 512, 14, 14)
  5. sequential5 output shape:        (1, 512, 7, 7)
  6. dense0 output shape:     (1, 4096)
  7. dropout0 output shape:   (1, 4096)
  8. dense1 output shape:     (1, 4096)
  9. dropout1 output shape:   (1, 4096)
  10. dense2 output shape:     (1, 10)

可以看到，每次我们将输入的高和宽减半，直到最终高和宽变成7后传入全连接层。与此同时，输出通道数每次翻倍，直到变成512。因为每个卷积层的窗口大小一样，所以每层的模型参数尺寸和计算复杂度与输入高、输入宽、输入通道数和输出通道数的乘积成正比。VGG这种高和宽减半以及通道翻倍的设计使得多数卷积层都有相同的模型参数尺寸和计算复杂度。

5.7.3. 获取数据和训练模型

因为VGG-11计算上比AlexNet更加复杂，出于测试的目的我们构造一个通道数更小，或者说更窄的网络在Fashion-MNIST数据集上进行训练。

  1. In [5]:
  1. ratio = 4
  2. small_conv_arch = [(pair[0], pair[1] // ratio) for pair in conv_arch]
  3. net = vgg(small_conv_arch)

除了使用了稍大些的学习率，模型训练过程与上一节的AlexNet中的类似。

  1. In [6]:
  1. lr, num_epochs, batch_size, ctx = 0.05, 5, 128, d2l.try_gpu()
  2. net.initialize(ctx=ctx, init=init.Xavier())
  3. trainer = gluon.Trainer(net.collect_params(), 'sgd', {'learning_rate': lr})
  4. train_iter, test_iter = d2l.load_data_fashion_mnist(batch_size, resize=224)
  5. d2l.train_ch5(net, train_iter, test_iter, batch_size, trainer, ctx,
  6.               num_epochs)
  1. training on gpu(0)
  2. epoch 1, loss 0.9464, train acc 0.658, test acc 0.857, time 37.8 sec
  3. epoch 2, loss 0.4087, train acc 0.850, test acc 0.888, time 36.2 sec
  4. epoch 3, loss 0.3344, train acc 0.878, test acc 0.900, time 36.2 sec
  5. epoch 4, loss 0.2917, train acc 0.893, test acc 0.903, time 36.2 sec
  6. epoch 5, loss 0.2609, train acc 0.904, test acc 0.909, time 36.2 sec

5.7.4. 小结

  • VGG-11通过5个可以重复使用的卷积块来构造网络。根据每块里卷积层个数和输出通道数的不同可以定义出不同的VGG模型。

5.7.5. 练习

  • 与AlexNet相比，VGG通常计算慢很多，也需要更多的内存或显存。试分析原因。
  • 尝试将Fashion-MNIST中图像的高和宽由224改为96。这在实验中有哪些影响？
  • 参考VGG论文里的表1来构造VGG其他常用模型，如VGG-16和VGG-19 [1]。

5.7.6. 参考文献

[1] Simonyan, K., & Zisserman, A. (2014). Very deep convolutionalnetworks for large-scale image recognition. arXiv preprintarXiv:1409.1556.