先日、日経新聞の記事で、東京都がChat-GPTを使って都庁採用試験の問題を入力して正答率を出したという記事がありました。
その時の正答率が32％だったらしく、「合格するには明らかに低い正答率」だと担当者は言っていたらしいのです。記事によると検証に用いたモデルは3.5だったそうです。あれ？「なんで3.5なの？」って思ってしまいました。
いや、使うならChat-GPT4でしょ？って思いませんか。比較的最近の記事ですから、3.5でやる意味が正直分からなかったのです。
東京都はなぜChat-GPT3.5を使って検証したの？
私の勝手な推測ですが・・・
もしかしたら…私の勝手な推測ですが、「Chat-GPT4でも検証をしていたけれど、正答率が良すぎたので、3.5でやってみて、そちらの結果をリリースしたのかな？」と思ってしまいました。「ヤバ過ぎるからちょっと隠しておこうぜ」みたいなことになったのかな？と。
それくらい、3.5と4は違います。
無料版で済まそうとしたら、それはやっぱり無料の範囲での結果しか得られません。東京都が、今どき3.5で検証するって・・・と感じてしまいました次第です。（個人的な勝手な感想です＾＾）
【著者プロフィール】太田亮児（おおたりょうじ）｜合資会社オオタキカク 代表
税理士・会計事務所の営業、マーケティング支援を行う。起業前は東京都内にある税理士法人に勤務してマーケティング業務を専任で手掛けた。2005年にオオタキカクを設立して独立。税理士事務所の個性を活かし各事務所の強みを磨き上げオーダーメイド式でマーケティングの仕組みを作り上げるサポートを行う。2010年に「税理士・会計事務所の儲かるしかけ」を同文館出版より出版し、税理士業界に特化したサービスを展開している。税理士向けの専門紙である税理士新聞（ＮＰ通信社発行）への連載記事を手掛けていたこともある。
