AIを使用してモナリザの笑顔を分析し、感情分析では彼女はそれほど幸せではないと考えています

超神経質によって

エグゼクティブサマリー:人間の感情は非常に微妙です。顔を合わせても、他のすべての小さな感情を完全に知覚することはしばしば困難です。しかし、近年、AI技術は徐々にそれを行うことができるようになり、人間よりも注意深くなっています。

キーワード: AI感情コンピューティング感情認識

著者| Sun Xiao

編集|モルトヤンニンギン 

出典|私は科学者iScientistです

「AI:人工知能、または愛」をテーマにした「サイエンスチャイナ-私は科学者です」の第28回イベントでは、人工知能分野の多くの科学研究者がさまざまな研究とAI分野の背後にある物語を共有するよう招待されました。

その中で、合肥工業大学コンピュータ情報学部教授で感情コンピューティング研究所所長の孫暁氏は、「彼の心は理解できないかもしれないが、人工知能は知っている」とスピーチを行った

以下はSunXiao先生の講義記録からの抜粋です。

 AIはモナリザを分析し、これらの感情を認識しました

みなさん、こんにちは。私の名前はSun Xiaoで、合肥工業大学の出身です。私はコンピューター科学者です。私の仕事は、コンピューターに人間の心臓を認識するように教えることです。

人間の精神は非常に複雑で、私は心理学者ではありません。どうすればコンピューターに人間の精神を認識するように教えることができますか?まずは古典絵画をご覧ください。

長い間、科学者たちはモナリザの秘密を解読しようとしてきました 

モナリザの表情はとても微妙です。

さまざまな背景や知識の人々が彼女の表現を解釈しています:彼女はとても優しく見えると言う人もいれば、真面目な顔をしていると言う人もいれば、チョコレートを食べた後に微笑むと言う人もいれば、これが彼女の笑顔だと言う人もいます彼女は妊娠していた...

誰もがモナリザが何を考えているのかを発見しようとしています。

また、顔の表情認識プログラムでモナリザの表情を簡単に認識した結果、非常に興味深い結果が得られました。モナリザの表情は62%の確率で中立であり、悲しみと幸福は主要な要素ではありません。それぞれ19%と12%ですが、彼女の表情にも存在します。

ここでのコンピュータの表情認識プログラムは、実際にはコンピュータに人間の表情を単に認識するように教えています。


上の写真のどちらの表現が驚いていると思いますか?

データはマルチメディアテクノロジーカンファレンスICIP2020からのものです

クイズに答えてみましょう。ここには3つのアニメーションがありますが、そのうちの1人が、非常に小さな驚きの表現をしました。

誰がこの表現をしたのかわかりますか?以下に正解を発表しましょう。

ポジティブ

びっくり

あなたは正しいと思いましたか?

真ん中の1つは非常に短い驚きの表現を示し、他の2つは短い期間の肯定的および否定的な表現を示しました。

これは実際、世界表現認識コンテストに参加したときのデータです。私たちは人工知能アルゴリズムを使用してこのコンテストに参加し、1位を獲得できたことを光栄に思います。

 自殺から始めて、微妙な心理的変動を監視します

人工知能アルゴリズムは、つかの間の微妙な表現を正確に識別できるようです。それで、それは心臓を認識することができると言うことができますか?

これは、10年以上前に日本に留学していたときに参加した仕事のいくつかを思い出させます。

チームは、一部の自殺犠牲者がソーシャルプラットフォームに投稿したコンテンツを分析しました

当時、私たちのチームはいくつかの国や地域での自殺に注意を払っていましたが、これらの自殺の背後には非常に深い心理的問題がいくつかあります。

そこで、私たちのチームはデータ収集作業を開始し、身体的健康データを含む、生涯にわたる自殺に関するいくつかのデータを取得しました。

彼らの生理機能に明らかな問題はないことがわかりましたが、彼らはブログやWeiboに非常に暗い精神的な旅を記録しました。

そこで、私たちのチームはブログとWeiboに関する多数の公開データの収集を開始し、心理学者の助けを借りて、これらのブログとWeiboのコンテンツに含まれる感情について非常に詳細な注釈を付けました。

上の写真は私たちがマークしたものです。はっきりと見えない場合がありますが、これはラベリングが非常に詳細であることも示しています。テキストの段落から行の間の行まで、各単語に含まれる精神状態さえもマークされています。私たちはこれらをコンピューターに教えるので、コンピューターは言葉から人々の精神状態を探求することも学びます。

この作業はまだ進行中です。

上の図に示すように、これらは2人の悲しいWeibosです。2人のブロガーは亡くなり、Weiboの更新時間はそれぞれ2012年と2013年にとどまっています。

アルゴリズムを使用してWeiboコンテンツの簡単な分析を行ったところ、半年以内に、Weiboの心理的変動がいくつかの非常に明白な特徴を示したことがわかりました。たとえば、Weiboの投稿の総数は非常に少なく、特にいくつかの肯定的な投稿があります。人々の感情は大幅に減少し、否定的な感情は徐々に増加しています。

これらの特徴はすべて、彼らが多くの心理的圧力を持っている可能性があることを反映しており、彼らの心も非常に苦痛です。これらは線に反映することができます。

Weiboでの2つの自殺の感情的傾向を分析するためのアルゴリズム

Weiboを使用して心理的変動を監視し、いくつかの興味深いものを見つけました。これは、私たちの研究室にいる2人のクラスメート、男の子と女の子の、自宅での流行の6か月間のマイクロブログでの感情的な変動です。

緑の曲線は幸せな感情を表し、オレンジは悲しみを表します

男の子のWeiboを最初に見てください。ほとんどの場合、彼らはとても幸せで、否定的な感情はほとんどありません。基本的にはそれを補うことができます。この男の子は毎日笑顔で暮らしています。これは、データから「男の幸せはとてもシンプルだ」という私たちの言葉を裏付けるかもしれません。

もう一度女の子を見ると、さまざまな感情の揺らぎが複雑で、「女の子の心はとても繊細」を反映しているのかもしれません。

したがって、顔の表情やソーシャルネットワークのコンテンツを使用することができ、人間の心理の簡単な検出を実行できるようです

 普及したメンタルコンピューティング:より複雑なメンタル評価

それで、いくつかのより複雑な状況で人間の心理学のより複雑な評価を行うことができますか?

ソーシャルネットワークのコンテンツや顔の表情に加えて、心の内部状態は、目、歩行姿勢、心拍数や呼吸などのいくつかの生理学的信号にも反映されます。

この情報を統合できれば、人の内部の心理状態をより正確に発見できます。つまり、心理学の外部の兆候を使用して、人の内部の心理状態を掘り下げ、人の性格特性を発見できます。人。

これは私が現在取り組んでいる「ユニバーサルメンタルコンピューティング」と呼ばれる研究でもあります。人工知能と心理学の交差点に属する感情コンピューティングの一分野であり、人工知能は心理学的知識を借りて人々の精神状態を検出します。

この動画は当研究室の研究成果のひとつです。

表情、声調、言葉の内容、目の角度、視界、心拍数や呼吸などを含む上半身全体の姿勢を合成し、現在の精神状態を判断しました。

ビデオでわかるように、私が彼にこのタスクを与えた後、彼は非常に興奮し、データは彼の「興奮した」列の値が非常に高いことを示しました。ビデオが終了しようとしたとき、彼は私ができると聞いた彼は現場を見に来たが、少しがっかりした。

いくつかの心理的な外部症状を通して人の内部心理学を検出できるので、さらに彼の性格特性を検出することができますか?

これらの2つの写真を見てください。

私は実験室で男の子と女の子がこのモナリザの肖像画を別々に観察するように手配し、同時にアルゴリズムを使用して彼らの目を記録しました。

場所が明るいほど、彼らの目はこの場所に長く留まります。

右の画像のオブザーバーは「顔を見るのが好き」な男の子、左のオブザーバーは服を見て色々なディテールを見るのが好きな女の子だと誰もが推測しやすいかもしれません

性別の違いには、その後の性格特性の違いが含まれます。これにより、外部情報の取り扱いに明らかな違いが生じます。これらの違いにもいくつかのルールがあります。次に、これらの法律を使用して、あなたの性格特性を推測し、分析を行うことはできますか?

2020年7月、妻を殺害した徐国里がインタビューを受けた

また、このアルゴリズムを使用して、いくつかのオンラインビデオを分析しました。このビデオをご覧になった方もいらっしゃるかもしれませんが、分析結果を彼の性格特性と比較し、司法専門家の結論と比較したところ、非常に一致する結論が得られました。たとえば、感情をコントロールする彼の能力は貧弱であり、彼は特定の極端な行動を起こしやすいです。

言い換えれば、同じ観察条件下で、コンピュータアルゴリズムは基本的に人間と一致することができます。

 テクノロジーを「心」から始めて、人類を助けましょう

「感情コンピューティング」は、20年以上前に提唱された概念であり、本来の目的は、自閉症の子供たちが他の人の感情の認識を含む自分の感情を認識して制御できるようにすることです。

顔の表情の感情的な計算、テキストの感情的な計算、より複雑な心理的検出、さらには人格の検出など、私が今共有したことはすべて、人工知能と感情コンピューティング技術を使用して「心」からサービスを提供することを望んでいます。

これまで、感情コンピューティングは実際にはゆっくりと着陸してきました。ロボット工学や自動運転などの一部の分野では、感情コンピューティングが多かれ少なかれ適用されます。また、私たちの技術的手段を通じて、感情コンピューティングがより多くの分野で役立つことを願っています。

もちろん、テクノロジーは私たちに便利さを提供しますが、それはまた疑問に直面しています。他の人工知能技術と同様に、感情コンピューティング技術についても懸念がある場合があります。たとえば、プライバシーを侵害する可能性があります。

私たちは、テクノロジーが人類により良いサービスを提供できるように、共同で構築および改善するというオープンな姿勢を受け入れることができると思います。

「心」から始まり、未来が期待できます。

-終了-

QRコードをスキャンして、ディスカッショングループに参加します

より高品質のデータセットを取得する

人工知能の応用を理解する

トップミーティングと論文をフォローする

詳細は「リーダー」に返信

よりエキサイティングなコンテンツ(画像をクリックして読む)

おすすめ

転載: blog.csdn.net/HyperAI/article/details/114267262