パスワードを忘れた? アカウント作成
16560910 story
人工知能

会話相手が応答をAIで生成していると感じた場合、相手への評価は否定的なものになるという研究成果 21

ストーリー by nagazou
対応の仕方は変わるかも 部門より
headless 曰く、

米コーネル大学などの研究グループがコミュニケーションにおける生成系 AI の利用による影響を 2 つの実験で検証している (論文The Register の記事)。

研究では Google のスマートリプライを利用したメッセージのやり取りを調査可能なツール「Moshi」を開発し、Mechanical Turk で募集した被験者を 2 人ずつランダムに組み合わせて討論させている。

実験 1 はスマートリプライを (1) 両方が利用可能、(2) 自分だけが利用可能、(3) 相手だけが利用可能、(4) 両方とも利用できない、という 4 つの条件に分けて実施。会話の完了後にスマートリプライの定義を説明し、相手がスマートリプライを利用したと思われる頻度や内容の正確さ、合意度などを質問している。その結果、スマートリプライを使用することでコミュニケーションの速度や肯定的な言葉の使用が増加し、相手とより近く協力的になったと感じる反面、相手が応答にアルゴリズムを使用していると予想した時にはより否定的な評価が行われたそうだ。

実験 2 ではスマートリプライによる応答内容を (1) 標準的、(2) 肯定的な応答に限定、(3) 否定的な応答に限定、(4) なし、の 4 条件に分け、それぞれの会話内容の感情値を示す VADER スコアで評価している。結果としては否定的な応答の示唆が感情をより否定的な方向に導き、肯定的な応答の示唆が感情をより肯定的な方向に導いたとのこと。

この議論は賞味期限が切れたので、アーカイブ化されています。 新たにコメントを付けることはできません。
  • by Anonymous Coward on 2023年04月14日 17時23分 (#4444329)

    スマートリプライとアルゴリズムは別物なの?

    • by Anonymous Coward

      論文のAbstractを読め…

      論文は、
      「アルゴリズムを使用した応答(algorithmic response)」そのものと、
      「アルゴリズムを使用した応答提案という、AIアプリケーションの1つ」=スマートリプライ
      を使い分けている。

      寿司を握ることと、寿司職人の違い、と同じだな。

      で、論文が言いたいことは、
      職人が寿司を握ったとしても、機械で握ったと客が感じてしまうと、客は寿司をおいしくないと感じてしまう、
      みたいに、
      スマートリプライの応答が、AIで生成したっぽいと感じてしまうと、相手は会話に萎えてしまう、
      ということだ。

      • by Anonymous Coward

        書き間違えた。×スマートリプライの応答が、→○スマートリプライを使わなくても、

      • by Anonymous Coward

        相変わらずスラドストーリー文はクソだな

      • by Anonymous Coward

        #4444380をAIが書いたと仮定すると途端に胡散臭くなるということか

  • by Anonymous Coward on 2023年04月14日 17時40分 (#4444347)

    まあASDと違ってAIは進歩するからそのうち解決する問題。

  • by Anonymous Coward on 2023年04月14日 18時47分 (#4444398)

    バイアスを掛けられる様に進化する?

  • by Anonymous Coward on 2023年04月14日 19時25分 (#4444437)

    人工無脳と分けて欲しいです。
    メーカーのチャットと対応で人工無脳を使うシーンが増えているが
    質問にまともなことを返さないので、聞いても無駄と判断するわけです。
    回答マニュアルが先にあって、質問の内容から、回答マニュアルの項目を選んでいるだけ。
    それにないものはエスカレーションしなければならないとそれを聞く手段が会話中にない。
    人間の対応と人工無脳の違い。

    • by Anonymous Coward

      この程度のレベルしか書けないなら同じ人間(AI?)と思いたくないなあ
      お前は人間?AI?それとも猫?

      • by Anonymous Coward

        掲示板でマウントとって何が楽しいの?

        • by Anonymous Coward

          電子的なものには価値を感じない人?

    • by Anonymous Coward

      ChatGPTとかBingのチャット機能使ってみ、GPT-4で人間超えた❗️仕事無くなる❗️とか騒がれてる割には一向に人工無能だよ
      無脳だって? まあね、同じことだろ

      • by Anonymous Coward

        質問して回答を得られるか得られないか?
        が重要でかつ本来の目的。
        AIが無能か有能かは学習度合いで変わってくるでしょうし
        指標に使ったGPT-4がマイクロソフトソフトに対し
        否定的な回答をしない様に教育していればつまらない回答にならざるを得ない。
        むしろコールセンター的なものであれば目的は達成されていると言えるでしょう。
        今後、運営側に都合が悪くなれば中国の事例同様突然廃止されるでしょうね。

      • by Anonymous Coward

        Googleの検索と同じでどれだけ役に立つ情報を引き出せるかは使い手の技量に大きく左右されるのであまりそういうこと言うと天然無能自慢になりかねないよ

        • by Anonymous Coward

          「GPTに完璧な回答を吐かせられない程度の無能wwwww」くらいの煽りだったら
          現状では著書の一冊や二冊がある程度のトップ0.000001%しか「俺の仕事無くなる怖い」って言えるレベルの回答出せてないんで
          その前提でじゃあ「お前は偏差値99.999未満の無能wwwww」って言われてどう思うかって言うとどうもこうもクソもないかなって…

typodupeerror

一つのことを行い、またそれをうまくやるプログラムを書け -- Malcolm Douglas McIlroy

読み込み中...