ChatGPT、どんどん頭が悪くなっていることが判明してしまう [611712225]
■ このスレッドは過去ログ倉庫に格納されています
ChatGPTの吐き出す答えの質が低下している可能性について、以前からまことしやかに囁かれてきたが、それはあくまでも噂レベルであり、実際に実証されたものではなかった。今回、スタンフォード大学とカリフォルニア大学バークレー校の研究チームは、この噂の真偽を確かめるべく、ChatGPTの応答品質が3月から6月にかけてどのように変化したかを調査した。結果は誠に興味深い事に、GPT-3.5とGPT-4の性能と挙動は、時間の経過とともに大きく変化することがわかったのだ。
Matei Zaharia氏、Lingjiao Chen氏、James Zou氏らによって著された論文「How is ChatGPT’s behavior changing over time? (ChatGPTの動作は時間の経過と共にどのように変化するか?)」の中で、指摘されていることだが、驚くべき事に「GPT-4に、『この数は素数ですか?段階的に答えてください』という質問をした場合の成功率が、3月の時点では97.6%の精度であったものが、6月にはなんと2.4%にまで低下している」事が、Zaharia氏によって特に強調されている。
https://texal.jp/2023/07/20/research-shows-that-chatgpt-response-quality-may-be-declining-rapidly/ 数学系の質問は、まず計算するためのコードを書かせて、
そのコードの変数に何々を入力した結果を出力してください、
と命令するとたぶん間違いはない。あいつは数学は苦手だが、
一からコード書く能力はかなり高い(但し試した事はない) >>523の方法だと2桁の素数は正確に選り分けることが出来た
97より大きな素数の場合はまだ試してないから分からん 情報の正確性や価値はグーグルのほうが選別できる
グーグルがつくるといいかもな
でも、検索上位が常に正しいとも限らない
そして、自分の目的に最善の答えを提供してくれるとも限らない
たとえばだが、FXで稼ぐ方法とか検索してみよう
検索上位に答えなんてないです
ないこともないが、裁量取引で才能がある人向けでしかないです >>523
まずプログラムに落ちる問題というのが一部しかないし
数値答えらえても見通し悪い
たとえばこの微分方程式を座標変換してくださいとか無理じゃね faxでchatgptの広告が来るけど なんなんだ 皆で弄るもんだから公式が前のに戻すとか言い出したぞw
怒ったんじゃないか AI戦争で敵国のAIに誤学習を繰り返すとか
この時代だとありそう コードレビューを頼んだ時「あれ?やっぱり馬鹿になってるかも」って思ったな
GPT-4.0がGPT-3.5くらいの知能になってないか?
なんかレスポンスもやけに速くなってるし。
Bardはもろに機械って感じでchatgptの代わりにはならんし、頼むでOpenAIさん やや複雑な関数を微分する問題を解かせたところ、Bingの創造的モードとBardは正答できた
ただしBardはなぜか英語で命令した場合は正解で、日本語で尋ねると同じ問題を誤答した
一方で、BingのバランスモードとChatGPT無料版(GPT3.5)は正しく解答できなかった
Bingの創造的モードはGPT4.0、バランスモードはGPT3.5で動いていると噂されているが、
この結果はその推測を裏付けている。ちなみにBingの厳密モードも正しい答えを出した >>534
与えられた関数を微分形式に変換するコードなんて
1980年代にはMITの教科書に載ってた例題を
2023年にAIで解くなんてしゅごいね >>537
MITの教科書の内容を知ってるなんて、なんて博学なんだ…しゅごい え?MITの教科書が日本の大学で推薦図書として名前が上がったり図書館や学部/研究科書庫に入るのって割と普通だけど
それがしゅごいと思う人が居る匿名掲示板はやばいな 多分MIT教科書の事だろうけど、あれはMITが授業のために作った教科書じゃないからなw
売れるようにそういう風なタイトルにしただけだ やっぱ嫌儲は知ったかぶりのバカでワロタ
MITの教授が教育目的で作った言語の教科書の話だから
その教授の講義ではそれを使う
そんな当たり前の話でいちいち>>540のようなバカなことを書くのは天羽だな 日本の底辺大には居るんだよね
研究も教育もロクにしていないから
講義の為に教育用言語を作って、それが研究活動のプラットフォームとしてある程度実用にもなって、教科書も書く
という当たり前の仕事を一切しないまま定年を迎える無駄飯食い で、この底辺大のハッタリ知ったかぶりの人は
数式処理の微分プログラムがそれほど難しいものではなく
学部向け教科書で扱われている内容だという事実からは目を背けて、延々とバカな話を続ける
こんなんじゃ学生からそっぽ向かれて仕事もロクにできないのが当たり前だよな >>541
いつものお前かよ…
MIT教科書をMITの教科書って言う時点で読んですらないだろお前
知ったかぶりイジられた時ってお前絶対連投してくるよなw
いつも見てるぞ 参照元がアレになって自分のダメな発言までソースとして取り込むようになってしまって駄目になる
イソップ寓話とかにもありそうな話だから誰か面白いフィクションにしてくれ
とりあえずロビタは産まれないことは理解したわ >>544
山形大学長と理学部長にまた天羽の気狂いストーキングのクレーム入れる事になるな。
おまえの話は根拠のない妄想誹謗中傷でしかないから
誰も相手にしないよ そもそも数式の微分なんて1950年代くらいのネタだよな
ファインマンが量子色力学(QCD)の数式を大量に扱う必要があって、コンピュータで数式処理ができないかという提案をしたのが1950年代後半
そっから数式処理プログラムの開発が始まって、MacLisp言語もその上で動くMacsymaが大型開発プロジェクトとして走ったのが1960年代
そっからLispハッカー文化が派生して、
Xerox他の半導体ファウンダリーサービスを使って
専用計算機ハードウェアがあちこちで作られたのが1970年代
そこら辺の成果を踏まえて、各種Lisp方言が生まれて研究教育で扱いにくくなったので、コンパクトなコアで幅広い機能をサポートし得る教育用言語として作り直されたのが1970年代後半くらいその教授らによってMITのCS関連講義で最初に扱う言語の教科書が書かれたのが1980年代。
MITでは1980年代にはその言語と教科書が使われていた。
1990年代初頭くらいになるとStandard MLとか次世代研究教育言語としてのHaskellの仕様策定が進んで、自分はその世代。 この手の学生時代に吸収して通過すべき基礎が
天羽の話には全て欠落しているから
まるで学部に入る前の高校生か高卒の人が
背伸びしてハッタリを打つような書き込みばかりになって
長々と基本常識を説明する必要が生じて
ところが天羽は他人の話を普通に理解して必要に応じて下調べをしながらリアルタイムで学習と議論を進める能力が欠落しているから、5分か10分で終わる話を5年でも10年でも引っ張り続ける
普通の学生と研究室の付き合いは短いと1年、学部1年から出入りして博士課程後期まで行く人でも10年程度だから
5分で終わる話を理解するのに10年かかる天羽のペースでは学生指導などやりようがない
だから指導学生が皆無なんだろ せっかく21世紀のGenerative Pre-trained Transformerチャットボットを使っても
解かせる問題のアルゴリズムが1980年代の学部生向け教科書に載ってるレベルの既知の解決済みの問題では
ChatGPTも困っちゃうよね
なんでコイツ40年前にコモデティ化した課題をドヤ顔でとかせようとするの?ってな 【本日のお間抜け底辺大職員氏の戯言】
1. 数式処理による微分処理が、40年以上前の問題だと知らずにドヤ顔
2. MITのCSの教授が開発・執筆した有名な言語処理系とその教科書がどれの事かわからない
3. 「MITの教科書」という日本語表現はおかしい、「「MIT教科書」が正しい表記だ、と称するキチガイの戯言←この二つが英語表記で違う表記になると思い込んでるところが笑いどころ >>549
そんなんでこまってりゃ使いようがねえわな 問題設定が幼稚過ぎる上に、それが解けないケースの問題分析も無いから、ただの素人談義でしかなくて馬鹿馬鹿しいね
数理解析研究所の歳下なのに職位が遥かに上の人に
2年も3年も絡んで形式的記述による自動証明をしないのがおかしいと言い出す気狂いアラ還が
40年前の学部教科書に載っている数式微分処理プログラムのアルゴリズムすら理解できずに涙目で錯乱連投してたら
数理解析研究所の教授も困っちゃうよね
こんな知恵遅れがなんで俺たちに絡んでるの?ただの高卒メンヘラレベルの気狂いじゃん、ってな >>551おまえにわかりやすくいうと
おまえの話は高卒無能者レベルのハッタリしかないから
もう喋んなってことだよバカだな ラマン散乱分野って時々この手の恥知らずな人が暴れるね
↓以下アラ還気狂いの妄想独り言日記 使ってる連中がどんどん信者みたいな状態になってて回答の精度は要らんなくなったから精度よりリスポンスタイム主体でチューニング図ったのかもな
それにバックグラウンドで学習データ推敲し続けるマイニングみたいな作業って電気代とか馬鹿高いしな(´・ω・`) >>553
俺のどのレスのことを高卒無能者レベルだと書いたの? いろいろ力加えていったら自己崩壊するラスボスパターン >>550
お前本当に読んでねえなw
原著にはMITの教科書なんて表題ねえんだよ、"MIT Education"「MITの教育」だ
MIT教科書ってのは翻訳者が付けた固有名詞なんだよ、勝手に変えるな「世界標準MIT教科書」だ
お前の事いつも見てるからな、ずっと見てるぞ >使ってる連中がどんどん信者みたいな状態になってて
同じこと思ってる人いたか、あれなんなんだろうな?
「使いこなす」という言葉が好きなのが特徴だな、たいして深いスキルは要らない所詮は数あるツールの1つに過ぎないのに 今ChatGPTに適当な質問をしてきたら何故か返答が英語だったわ
前は日本語だったのにどうして… >>563
1つずつ論理回路ボード抜かれてくHAL9000みたいだなw 自動生成AI→ネットで拾った情報を切り貼りして文章っぽくするだけです
これガッカリしたよな >>566
の割には検索エンジンみたいに正確な情報出てくる訳でもねえしな
謝罪文作成が一番の得意技とかw >>560
やっぱり気狂いやん
1980年代にMITのCS教育で使われたから
MITの教科書だという話に
たいとるがうんぬんとかやっぱり山形大学の落ちこぼれはレベル低くて草
コイツ28年間こんな屁理屈しか言わないから学生にも地雷扱いされてんだよな >>558
アンカーすら読めない知恵遅れっぷりに草生えた 数式微分が40年前の学部講義の内容だとバレて
専門書に「MITの教科書」というタイトルがついていない
という意味のない異論提出をする落ちこぼれメンヘラ惨めだな 「考える」AIなんてつくれるわけねえんだよ
コンピュータがサイコロふって、そのときに一番、世間のみなさんに喜んでもらえる順列のパターンを提示してるだけ もしかして将棋とかチェスも弱くなってる?
こいつは出来ないんだっけ? ■ このスレッドは過去ログ倉庫に格納されています