gpt4 book ai didi

machine-learning - PyTorch 的 nn.Transformer 中的 src 和 tgt 有什么区别?

转载 作者:行者123 更新时间:2023-12-05 04:52:04 24 4
gpt4 key购买 nike

从文档中可以看出,要创建这样的转换器模型:

transformer_model = nn.Transformer(nhead=16, num_encoder_layers=12)
src = torch.rand((10, 32, 512))
tgt = torch.rand((20, 32, 512)) # What is tgt??
out = transformer_model(src, tgt)

tgt 意味着什么? tgt 应该和 src 一样吗?

最佳答案

Transformer 结构由两个组件组成,编码器和解码器。 src是编码器的输入,tgt是解码器的输入。

例如执行将英语句子翻译成法语的机器翻译任务,src 是英语序列 id,tgt 是法语序列 id。

关于machine-learning - PyTorch 的 nn.Transformer 中的 src 和 tgt 有什么区别?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/66608447/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com