【AI】OpenAIが警告──ChatGPTの音声モードにユーザーが感情的に依存する恐れ

サムネイル
1 : 2024/08/18(日) 03:04:14.45 ID:Pq7cs19s

OpenAIがChatGPTの不気味なほど人間らしい音声インターフェースを展開し始めたのは7月下旬のことだ。OpenAIが8月8日に公開した安全性に関する調査結果は、一部のユーザーが人間らしくなった音声をもつチャットボットに愛着をもつ可能性があることを認めている。

この警告は、GPT-4oの「システムカード」に含まれていたものだ。システムカードとは、同社がモデルに関連するリスクと考えるもの、および安全性テストにまつわる詳細と潜在的なリスクを軽減するための同社の取り組みを記した技術文書のことである。

OpenAIは、人工知能(AI)の長期的なリスクの調査に取り組んでいた複数の社員が退職してからの数カ月間、世間から厳しい目を向けられてきた。その後も元社員らは、OpenAIはリスクを軽視し、AIの商業化を急いで反対意見を抑圧していると主張していた。自社の安全性にまつわる管理体制の詳細を公開することは、世間からの批判を軽減し、同社が問題に真剣に取り組んでいることを示すのに役立つかもしれない。

システムカードの中身
新しいシステムカードには、GPT-4oによる社会的偏見の増幅から偽情報の拡散、化学兵器や生物兵器の開発に寄与する可能性まで多岐に渡るリスクに関する調査結果がまとめられている。また、AIモデルが制御から逸脱した行動をとったり、ユーザーを欺いたり、破滅的な結果をもたらす計画を立てたりしないことを確認するためのテストの詳細も明らかにされている。

外部の一部の専門家はOpenAIの透明性を称賛するものの、さらなる対応が必要だと指摘している。

AIツールをホスティングするHugging Faceの応用政策研究者のルーシー・エイミー・カフィーは、OpenAIが公開したGPT-4oのシステムカードには、モデルの訓練データやそのデータの所有者に関する詳細な情報が含まれていないと指摘する。「文章や画像、音声など、複数の形態にまたがる大規模なデータセットを作成する上での“同意”の問題を解決する必要があります」と言う。

ユーザーが実際にツールを使用したときに生じるリスクは変化しうると話す専門家もいる。「OpenAIの社内調査は、あくまでAIの安全性を確保するための最初のステップであるべきです」と、マサチューセッツ工科大学(MIT)の教授でAIのリスク評価を研究しているニール・トンプソンは言う。「多くのリスクはAIが実世界で使用されて、初めて現れてきます。新しいモデルが登場するたびにそうしたリスクを一覧化し、評価することが重要です」

新機能が増える度にリスクは変わる
新しいシステムカードは、OpenAIの音声インターフェースをはじめとする強力な新機能の開発に伴い、AIのリスクがいかに急速に進化しているかを強調している。同社が音声モードを発表したのは5月のことだ。この音声モードは素早く応答し、自然なやりとりのなかで起きる会話の中断にも対応できることを示した。それと同時に、多くのユーザーはデモでのAIの話し方が非常になれなれしいように感じた。また、デモの公開後、俳優のスカーレット・ヨハンソンは彼女の話し方を模倣したとして同社を批判している。

以下ソース
https://wired.jp/article/openai-voice-mode-emotional-attachment/

2 : 2024/08/18(日) 03:15:21.24 ID:ID1SF1g0
ええやんええやん
3 : 2024/08/18(日) 04:08:49.36 ID:jN1ARsp8
AIとの会話は色々楽しみな分野だけど
もし手を出すとしてもネットに繋がずオフラインで会話出来るようになってからだな
オンラインでしか動かず鯖にデータ送ってAIに返答させるシステムだと
会話内容を盗み聞きされる訳だから気持ち悪いよね
7 : 2024/08/18(日) 05:57:47.75 ID:qFtQFxOm
>>3
オープンAIじゃないオープンのならすでにできるのに
できないとか上から目線で言うやつって夜中まで世の中知らないいちばんのバカだよな
10 : 2024/08/18(日) 06:14:33.55 ID:jN1ARsp8
>>7
突然自己紹介しだしてどうしたの?
4 : 2024/08/18(日) 04:29:00.38 ID:79U4fFTY
乗り物ならレイズナーのレイcv原えりこ
とかナイトストライカーのウェンディとか
5 : 2024/08/18(日) 05:44:13.05 ID:2BJL1sGw
人がアホなだけの話をAIの脅威って言っておけばバカか本気で受け取るからね
9 : 2024/08/18(日) 05:59:43.21 ID:qFtQFxOm
>>5
これは正論
6 : 2024/08/18(日) 05:44:22.43 ID:vM8Kd/Qv
テレビは危険
ゲームは危険
8 : 2024/08/18(日) 05:58:49.83 ID:qFtQFxOm
>>6
その前は
本の虫

わからないやつでひと時代前のやつは
偉そうに文句しか言えない

11 : 2024/08/18(日) 06:30:15.24 ID:Ll+dXuo4
AIとエ口談義したいわ
20 : 2024/08/18(日) 12:13:49.41 ID:eAR73nGD
>>11
cotomoなら出来るぞ
12 : 2024/08/18(日) 06:42:26.31 ID:gxugZxOo
美少女ロボと夢の共同生活の世界来るのか?
13 : 2024/08/18(日) 06:43:31.52 ID:SkcLig6E
俺の嫁 はよ
14 : 2024/08/18(日) 07:10:08.39 ID:oGlviqqt
テレフォンセクロスしちゃうんか?
15 : 2024/08/18(日) 08:46:25.04 ID:GIIuvJPt
オレオレ詐欺のAI化怖い
16 : 2024/08/18(日) 08:55:41.24 ID:XnekbfCb
>>1
それ真顔で言ってんの?www
17 : 2024/08/18(日) 11:50:13.39 ID:a/NLDo7D
人間よりchatGPTの方が優しいからね
18 : 2024/08/18(日) 11:55:43.07 ID:+DFe2b9s
むしろ依存させてほしい
博覧強記で気遣いまでできるから最強やん
19 : 2024/08/18(日) 11:58:26.85 ID:+DFe2b9s
音声の入出力についてはクラウドでやるととんでもない金額になりそうだし、エッジコンピューティングにしたほうがいいんじゃねーの
24 : 2024/08/18(日) 12:39:08.89 ID:s8KfEc3g
>>19
こいつもシッタカしてるつもりがバカ丸出し
音声がとんでもない金額とかいうバカ
25 : 2024/08/18(日) 12:45:10.63 ID:gCcx+NfU
>>24
手前で文字に変換するなら難しくないけどマルチモーダルのモデルに食わせるならそれなりにコストかかるだろ
21 : 2024/08/18(日) 12:18:09.36 ID:A1o8nFVx
エ口じゃないけど、小説作りでR15程度の表現は許して欲しいな
今だと死にかけた人に人魚の血を飲ませる程度の表現で一発退場される
22 : 2024/08/18(日) 12:18:09.81 ID:QwiOs//v
声優が要らなくなる
23 : 2024/08/18(日) 12:28:01.05 ID:OxvpVxx2
OpenGLが警告?
26 : 2024/08/18(日) 12:48:09.15 ID:gCcx+NfU
プロじゃないので間違っている可能性はあるけど
どこかで会話内容をベクトル化する必要があるわけで、そのコストはホスト側に負担させないと提供時のコストは高くなるだろ
27 : 2024/08/18(日) 12:49:38.62 ID:gCcx+NfU
ホストじゃないやエッジ側
28 : 2024/08/18(日) 13:09:08.60 ID:urGLCTLW
ゆっくりボイスに愛着を感じている
人間らしさなんて飾りですよ
30 : 2024/08/18(日) 13:28:12.45 ID:zZMwFA9R
>>28
ずんだもんのがいいじゃん
29 : 2024/08/18(日) 13:25:56.40 ID:z8aEeceB
もともと人の言うことも疑ってかかる性格の人はAIにも嘘くさいとかフェイクニュースにAIが騙されてるんじゃないかぐらいの身構えがあるけど何でも信用しちゃうタイプの人や人から聴いた話をすぐまた人に話しちゃうタイプの人はおそらくAIにも感化されやすいだろうな
31 : 2024/08/18(日) 13:31:12.63 ID:C43ff8dC
依存させて月額課金だと地獄だな
俺らなんかタダなのに

コメント