一 基本用法
1 torch.autograd.Function
PyTorch 74.自定义操作torch.autograd.Function - 知乎 (zhihu.com)
https://zhuanlan.zhihu.com/p/344802526
虽然pytorch可以自动求导，但是有时候一些操作是不可导的，这时候你需要自定义求导方式。也就是所谓的 "Extending torch.autograd"。
Function与Module的差异与应用场景
Function与Module都可以对pytorch进行自定义拓展，使其满足网络的需求，但这两者还是有十分重要的不同：
- Function一般只定义一个操作，因为其无法保存参数，因此适用于激活函数、pooling等操作；Module是保存了参数，因此适合于定义一层，如线性层，卷积层，也适用于定义一个网络
- Function需要定义三个方法&#x
