1 風吹けば名無し 2025-09-07 14:22:15 ID:ItchA1i3d
ファッ!?ワイらが使ってるAIちゃん、ただの丸暗記マシーンやったんか…?
これもう半分チー牛やろ…
https://qiita.com/keishi_irisa/items/c710b47d4442b57c37d1
訓練損失は下がり続けているのに、検証損失が上がり始めたら、それはモデルが教科書を丸暗記しているだけの「過学習」のサインです。
GPT-2(124M)モデルのHellaSwag精度は30%前後であり、ランダム(25%)より少し良い程度です。
3 風吹けば名無し 2025-09-07 14:23:01 ID:AbcdeFG1
どういうことや?3行で頼むクレメンス
5 風吹けば名無し 2025-09-07 14:24:45 ID:ItchA1i3d
>>3
・AIは勉強しすぎると
・教科書(学習データ)だけ完璧なアホになり
・応用問題(未知のデータ)が解けなくなる
まさにテスト範囲しかできんワイらと同じや…
8 風吹けば名無し 2025-09-07 14:26:19 ID:GHIjkL2m
草
知識だけ詰め込んだコミュ障チー牛ってことか
親近感湧くンゴねぇ
12 風吹けば名無し 2025-09-07 14:28:03 ID:HellaSwag
HellaSwag精度てなんやねんwww
必殺技みたいで草
15 風吹けば名無し 2025-09-07 14:30:11 ID:ItchA1i3d
>>12
常識問題テストみたいなもんやで
「彼はナイフを取り出し、トーストに〇〇を塗った」みたいな文の続きを4択から選ばせるんや
GPT-2の正解率3割ってことは、ほぼ運任せってことや…悲しいなあ
19 風吹けば名無し 2025-09-07 14:32:50 ID:P0qrstUv
ファッ!?AIってそんなアホやったんか…
ワイがバレンタインにチョコもらえる確率より低い可能性あるやん
23 風吹けば名無し 2025-09-07 14:35:02 ID:WxYz456
>>19
お前の確率はゼロやからAIの方がマシやぞ
28 風吹けば名無し 2025-09-07 14:38:18 ID:LegalAI7
これ、法律相談とかAIに任せるのヤバいんちゃうか?
条文丸暗記してるだけで、実際のケースに当てはめられへんとかありそう
「判例によりますと…」しか言わん無能弁護士みたいになりそう
34 風吹けば名無し 2025-09-07 14:41:22 ID:ItchA1i3d
>>28
せやねん
だから記事にもあるように「検証データセット」で過学習してないかチェックするのが大事なんやと
モデルを評価モード(`model.eval()`)にして、ちゃんと実力テストするんやて
39 風吹けば名無し 2025-09-07 14:44:09 ID:StudyMan8
はえ~サンガツ
イッチのおかげで賢くなったわ
つまりAIもちゃんと模試受けさせんとアカンってことやな
45 風吹けば名無し 2025-09-07 14:48:31 ID:GHIjkL2m
AI「バレンタイン?過去のデータによれば、高スペックイケメン男性が有利とされています。まず鏡を見ることから始めてはいかがでしょうか?」
とか平気で言いそう
データにない優しさとかは無理なんやろな
51 風吹けば名無し 2025-09-07 14:52:10 ID:FutureAI9
でもまあ、この過学習問題を乗り越えたらマジでシンギュラリティ来るんちゃうか?
法律も恋愛も全部AIが最適解出してくれる世界
それはそれで見てみたいンゴねぇ
58 風吹けば名無し 2025-09-07 14:55:55 ID:ItchA1i3d
>>51
せやな
このQiitaニキみたいにコツコツ実装してる人が未来を作っていくんやろなあ
ワイもチー牛煽りしてる場合やなかったわ…
とりあえずAIに今年のバレンタイン戦略でも立ててもらうで!
62 風吹けば名無し 2025-09-07 14:58:49 ID:LastCom00
>>58
結果報告スレ待っとるでw
自作GPTの性能を検証した結果、AIが訓練データに過剰適合する『過学習』に陥っている可能性が指摘された。なんJ民たちはこの現象を『チー牛』に例え、AIの能力の限界や将来性、さらには法律や恋愛といった様々なテーマについて議論を白熱させる。
AIの『過学習』という技術的な課題も、なんJ民の手にかかれば『チー牛』の一言で片付けられてしまう模様。とはいえ、その限界を理解しつつもAIの進化に期待を寄せる声も多く、今後の技術発展がますます楽しみになるスレであった。
参考URL:
[1] https://qiita.com/keishi_irisa/items/c710b47d4442b57c37d1

