python - python中 'ctx'和 'self'的区别？

Question

在使用深度学习库 PyTorch 时，我遇到了这样的定义。 ctx 是否与 self 具有相同的行为？

class LinearFunction(Function):

    @staticmethod
    def forward(ctx, input, weight, bias=None):
        ctx.save_for_backward(input, weight, bias)
        output = input.mm(weight.t())
        if bias is not None:
            output += bias.unsqueeze(0).expand_as(output)
        return output

    @staticmethod
    def backward(ctx, grad_output):
        input, weight, bias = ctx.saved_variables
        grad_input = grad_weight = grad_bias = None
        if ctx.needs_input_grad[0]:
            grad_input = grad_output.mm(weight)
        if ctx.needs_input_grad[1]:
            grad_weight = grad_output.t().mm(input)
        if bias is not None and ctx.needs_input_grad[2]:
            grad_bias = grad_output.sum(0).squeeze(0)

        return grad_input, grad_weight, grad_bias

Answer 1

静态方法 ( @staticmethod ) 直接使用 type 类调用，而不是此类的实例:

LinearFunction.backward(x, y)

因为你没有实例，所以使用 self 没有意义在静态方法中。

在这里， ctx只是一个常规参数，您在调用方法时必须传递它。