Double réseau de neurones (siamois) comparer deux similarité sémantique des phrases

étude approfondie a été largement utilisé dans le domaine de traitement du langage naturel (PNL), dans les domaines traditionnels dans le passé des défis apparemment complexes, mais ont également fait des progrès très importants. Cet article d'un Kaggle parler du sujet réel, et prendre cela comme un exemple, pour afficher une application dans une étude approfondie sur la PNL. Le vrai problème peut être considéré comme un exemple typique de la traduction compréhension ou nerf sémantique, dans le processus de résolution de ce problème, nous allons spécifiquement utilisés comprennent LSTM [5], Word Embedding [4], réseau siamois [6], et bien d'autres technologies Si les lecteurs ne comprennent pas une technique dans laquelle la fin du texte se trouve dans les références données dans plusieurs entrée de blog avant d'écrire. Tel qu'il est utilisé ici, le cadre est encore très concise Keras (Bien sûr, si vous êtes plus familier avec tensorflow ou PyTorch, basé sur une réécriture simple de cet article est très simple).

 

Tout d'abord, la description du problème

Regardez d'abord les problèmes que nous devons résoudre. Le problème provient du site Kaggle une fois organisé un concours [1], comme indiqué ci-dessous. Comme nous le savons tous, Quora est similaire à la version anglaise de « connaître la paix, » le site. Chaque jour, il y aura beaucoup de gens sur les questions Quora, bon nombre de ces questions, même si la question est posée est pas exactement la même chose, mais l'essence est en fait un problème. Par exemple:

  • Comment puis-je voir tous mes commentaires Youtube? 
  • Comment puis-je lire et trouver mes commentaires Youtube? 

et

  • Comment puis-je être un bon géologue?
  • Que dois-je faire pour être un grand géologue?

Maintenant, c'est le domaine de la PNL dans un problème très commun, il peut se regrouper en compréhension sémantique (comprendre le sens des deux phrases et de contraste) ou traduction nerveuse (traduction d'une langue pour décrire la manière ou d'une manière ou d'une autre langue description) catégorie .

Je suppose que tu aimes

Origine blog.csdn.net/baimafujinji/article/details/50537944
conseillé
Classement