5.3.7注意力机制模型直观理解

问题:

1注意力机制模型是什么?

答案:自己的理解,不·一定对。(1)在RNN的基础上加上一些权重,比如在翻译第一个单词的时候,系统会给予原句子每个单词一些权重,权重的意义是单词的权重越大,那么在翻译“这个词”时,系统会给予这个单词更多关注的关注。(2)权重如何求?不知道?

2注意力机制模型有什么用?

答案:翻译一个词的时候对原句子中每个词的关注度不一样。这样翻译更合理,准确。

3注意力机制怎么用?

答案:还不知道。

猜你喜欢

转载自blog.csdn.net/dqefd2e4f1/article/details/85028676