ハルシネーションを起こしにくいAI第1位は意外にもGoogleのgemini1.5proだった件 [479216124]

[1 顔デカだって空も飛べるはず 警備員[Lv.4][新芽] (ﾜｯﾁｮｲW cbaf-e4TD) 2024/10/12(土) 17:09:58.53 ID:nWHPqPRz0]

噓をつかない生成AIはこれだ　50モデル比較を3分解説：日本経済新聞
://www.nikkei.com/article/DGXZQODL1858X0Y4A910C2000000/

https://5ch.net

[2 顔デカだって空も飛べるはず 警備員[Lv.4][新芽] (ﾜｯﾁｮｲW cbaf-e4TD) 2024/10/12(土) 17:10:05.82 ID:nWHPqPRz0]

なるほどね

[3 顔デカだって空も飛べるはず 警備員[Lv.4][新芽] (ﾜｯﾁｮｲW cbaf-e4TD) 2024/10/12(土) 17:10:53.25 ID:nWHPqPRz0]

gemini 1.5 pro
GPT4o
claude3.5
command r+
メタのやつ
の順でした

[4 顔デカだって空も飛べるはず 警備員[Lv.4][新芽] (ﾜｯﾁｮｲW cbaf-e4TD) 2024/10/12(土) 17:11:15.89 ID:nWHPqPRz0]

まさか生成AIを仕事で使ってないど底辺モメンはいないよな？

[5 番組の途中ですがアフィサイトへの転載は禁止です (JP 0H86-c29V) 2024/10/12(土) 17:12:07.66 ID:zOBvYDgTH]

わかりませんしか返ってこないやつか

[6 🏺アフィステマ許すな！ (ﾄﾞｺｸﾞﾛ MMd6-l24d) 2024/10/12(土) 17:12:26.31 ID:DL+AQteuM]

　　
　　まじかー😾

[7 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 064e-ap1t) 2024/10/12(土) 17:15:10.28 ID:Tx6jejzH0]

なんで嘘ついちゃうのかね

[8 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW ca51-PziQ) 2024/10/12(土) 17:17:10.60 ID:uZtc4A5T0]

ハルシネーションってなんだよ

[9 顔デカだって空も飛べるはず 警備員[Lv.4][新芽] (ﾜｯﾁｮｲW cbaf-e4TD) 2024/10/12(土) 17:17:55.47 ID:nWHPqPRz0]

>>7
マジレスするとtransformerの仕様やね
学習データに基づいて、インプットに対する蓋然性が高い回答を吐き出すわけだけど、この過程で実際には学習データにはないような内容も生成してしまうことを排除できない

[10 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 2a14-8QIr) 2024/10/12(土) 17:19:26.27 ID:T8RUQh2D0]

最新だとo1 previewかな？

[11 顔デカだって空も飛べるはず 警備員[Lv.4][新芽] (ﾜｯﾁｮｲW cbaf-e4TD) 2024/10/12(土) 17:20:01.01 ID:nWHPqPRz0]

>>10
いや、あれはハルシネーションを起こしやすいよ

[12 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 4af4-BrNy) 2024/10/12(土) 17:21:09.60 ID:aUbDD3Yb0]

ハルシオンはケンモメンの常備薬だから流石にね？

[13 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲ 06d3-oLgd) 2024/10/12(土) 17:21:22.91 ID:UnFFQSQ70]

AI「はい論破

[14 顔デカだって空も飛べるはず 警備員[Lv.4][新芽] (ﾜｯﾁｮｲW cbaf-e4TD) 2024/10/12(土) 17:23:00.77 ID:nWHPqPRz0]

o1 previewは論理的に思考するように誘導して作られたモデルだけど、逆に自己生成のロジックに頼りやすくなるから、逆説的にハルシネーションを起こしやすい
geminiは検索データがバックにあるからか、確かにハルシネーション起こしにくい気がする

[15 番組の途中ですがアフィサイトへの転載は禁止です (ｵｲｺﾗﾐﾈｵ MM1f-815Z) 2024/10/12(土) 17:23:34.16 ID:PKdSVn6BM]

ストゼロ飲ませてシャキッとさせなきゃ

[16 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW c63a-k6Q3) 2024/10/12(土) 17:24:42.88 ID:OMVjM3EY0]

なんだよハルシネーションって
かぶれてんじゃねえよボゲが

[17 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲ d336-cSv7) 2024/10/12(土) 17:30:11.22 ID:k/Q33pfv0]

gemini 1.5 pro、なんか頑固で無理だよこいつ

[18 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲ df18-oLgd) 2024/10/12(土) 17:31:03.13 ID:gnviuPSB0]

無理して難しい言葉使うなよ

[19 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 3371-PziQ) 2024/10/12(土) 17:31:23.12 ID:GqOQFToi0]

>>14
なんかそういうデータあるんですか？

[20 安倍晋三🏺 (ﾜｯﾁｮｲW 9e07-2Ujh) 2024/10/12(土) 17:32:30.45 ID:3J5nZOwu0]

Geminiすぐエラー吐くゴミになったな
3回くらい質問すると止まる

[21 安倍晋三🏺顔デカ (ﾜｯﾁｮｲ 8bb5-cSv7) 2024/10/12(土) 17:34:00.52 ID:FbASCpeD0]

こいつにとって都合の悪い質問すると急にロボットっぽく回答拒否するから嫌いやわ
知ったかでも大抵の事は拒否せず答えてくれるChatGPTのが話し相手に適してる

[22 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 4e03-SWST) 2024/10/12(土) 17:35:01.85 ID:d/9bUCLo0]

>>17
会話するためじゃなくて業務で決まった受け答えさせるにはそのくらいでいいんじゃね

[23 警備員[Lv.17] (ﾜｯﾁｮｲW 0656-JTs3) 2024/10/12(土) 17:38:39.64 ID:Kjbtcb+h0]

9.9と9.11のどちらが大きい数字か聞いたら、最近はちゃんと答えてくれるね

[24 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 43fd-47G5) 2024/10/12(土) 17:39:34.07 ID:kjAz/AwA0]

生成aiは学習データを元に入力された文章に対して最も確率が高い「続き」を生成してるだけだぞ

[25 からだすこやかジャンダルム🏺🏺 (ﾜｯﾁｮｲW 5a5a-q9ML) 2024/10/12(土) 17:42:19.56 ID:bA04rmLo0]

やべぇ

[26 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 9b43-cZk2) 2024/10/12(土) 17:44:42.63 ID:MpqboNjV0]

>>14
何回もプロンプト読んで実行してるんだから別のLLMが検証していてもおかしくない
だからハルネーションを一番起こしにくい可能性もある

[27 顔デカだって空も飛べるはず 警備員[Lv.5][新芽] (ﾜｯﾁｮｲW 3388-e4TD) 2024/10/12(土) 17:53:39.93 ID:D4bsnUBB0]

>>26
実際ハルシネーション起こしてるけど

[28 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 4a21-6pl/) 2024/10/12(土) 17:54:33.17 ID:UD3caaLs0]

調べ物はperplexityとかいうのしか使ってないわ
使った中では一番まともだった

[29 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲ 3aba-hOPt) 2024/10/12(土) 17:57:33.25 ID:j36bFTpw0]

大体のAIに落語の演目について訊ねると、どっから持ってきたんだって感じの
詳細な嘘あらすじ教えてくれるから面白いぞ

[30 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲ d336-cSv7) 2024/10/12(土) 17:57:50.05 ID:k/Q33pfv0]

>>22
うーん
botならそれでいいが、AIってそんなレベルじゃないからなあ

[31 警備員[Lv.48] (ﾜｯﾁｮｲW dfcf-ilj5) 2024/10/12(土) 18:17:21.65 ID:BFoMHa3i0]

わかりませんって返信したら人でも死ぬのか？ってくらいに適当に返すよな

[32 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 4a0c-6oN7) 2024/10/12(土) 18:24:10.21 ID:s37EoYt/0]

要はフォールス・ポジティブなのか？ハルシネーションって

[33 番組の途中ですがアフィサイトへの転載は禁止です (JPW 0H86-XjSR) 2024/10/12(土) 18:27:22.17 ID:XhkL6m4GH]

Genemiは正確性を重視するようになった分ウザキャラになった

[34 顔デカだって空も飛べるはず 警備員[Lv.5][新芽] (ﾜｯﾁｮｲW 3388-e4TD) 2024/10/12(土) 18:30:10.15 ID:D4bsnUBB0]

>>32
まあ近いね
オーバーフィッティングなんかにも近いと思う
学習データで想定されていないインプットに対する生成で起きやすい

[35 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲ 0f8d-hOPt) 2024/10/12(土) 18:35:22.71 ID:wlEOaobZ0]

ヘンな回答したらソース出せ連呼しろ。それで勝てる

[36 顔デカ (ｵｲｺﾗﾐﾈｵ MMeb-hOPt) 2024/10/12(土) 18:48:32.29 ID:OHxP0q6tM]

わからないならわからないって言って
という命令を筆頭に与えると
現状のAIはたいていのことがわからない

[37 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 4aea-jyON) 2024/10/12(土) 18:55:06.15 ID:/u7LKUG10]

AIってやっぱバブルよなあ

[38 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 4adf-9zd8) 2024/10/12(土) 18:56:52.00 ID:4lU59vp40]

ハルキネーション？ノーベル賞候補止まり現象のこと？

[39 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲ 2a08-U3qR) 2024/10/12(土) 19:01:30.26 ID:GjTwdC0m0]

物まね芸人に無茶ぶりした時と似た感じ

[40 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 4a81-KhUU) 2024/10/12(土) 19:06:01.21 ID:ktQb3dAa0]

無料で公開されてるgeminiは同じく無料で公開されてるCopilotより嘘つきまくってたけど
最近なんか改善した気もするな

[41 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW 06f3-jLGr) 2024/10/12(土) 19:17:38.66 ID:7+eQA3MB0]

ELYZAの日本語LLMはどうなの

[42 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲW e7d6-wKap) 2024/10/12(土) 21:03:58.21 ID:JUQA0AiB0]

GLM-4じゃないの？

[43 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲ 4a48-pV6A) 2024/10/12(土) 21:15:54.03 ID:8EDSJFho0]

ハルヒネーションってあれだろ
同じ話を何回も繰り返すやつ