万能に見えるChatGPTにも、苦手なことがあります。

聞いても使えない答えが返ってきた経験はありませんか？

私は1週間ほど使ってみて、傾向が見えてきました。

この回では、苦手な分野の具体例を紹介します。

ChatGPTに頼りすぎてしまう方は、ぜひ読んで下さい！


苦手な分野は大きく3つ

もしChatGPTが苦手な分野で本を書きたいなら、情報集めの道具として使うくらいにしておくのが無難です。

苦手なのは、主に次の3つです（あくまで一例です）。

  • 鉄道や交通についての質問
  • 観光についての質問
  • リアルタイムの情報についての質問


電車の路線は、ほぼ全滅

いろいろ聞いて「これは使えない」と感じたジャンルの一つが、鉄道です。

返ってきた答えは支離滅裂なものが多く、まともな内容はほとんどありませんでした。

これは原稿を書いた2023〜2024年ごろの実験です。

2026年10月時点では、ChatGPTは無料版でもWeb検索を使って答えられるので、結果が変わる可能性があります。

ただ、乗換や運行の情報は、今も路線の公式サイトやアプリで確認するのが確実です。

一見もっともらしくても、中身はトンチンカンで、ギャグのネタにはなるかもしれません。


「京都駅を通る路線をすべて挙げてください。」

と聞くと、JR西日本の東海道本線、山陽本線、奈良線、草津線、嵯峨野線、近鉄京都線、京都市営地下鉄烏丸線などが返ってきました。

GPT-4で精度は大きく上がったものの、それでも誤りは出ます。

たとえば草津線は京都駅を通りません（朝夕に直通列車は走っています）。

さらに、かっこ書きにあった湖西線は、まったく別の路線でした。

交通の質問は、ChatGPTには聞かないほうがいいかもしれません。


観光プランは、あくまで参考

観光案内も、得意とは言えません。

ただ、聞き方を工夫すれば、ある程度は答えてくれます。

「京都へ1泊2日で出かけます。おすすめの観光プランを考えてください。1日目は8時半に京都駅へ着き、17時にホテルにチェックインします。2日目は9時から観光し、20時の新幹線に乗ります。」

と聞くと、1日目に清水寺、三十三間堂、祇園、八坂神社、二年坂・三年坂、2日目に嵐山、天龍寺、伏見稲荷大社という、時間割つきのプランが返ってきました。

営業時間の確認、歩きやすい靴、混雑への余裕、季節に合った服装といった注意点も添えられています。

GPT-4でかなり精度は上がりました。

ただ、観光のスケジュールはシーズンで変わりますし、混雑も考えなければいけません。

ChatGPTの情報は参考にとどめて、日程は自分で調べて決めましょう。


最新の出来事は、モデルしだい

ChatGPTは、ある時点までの情報をもとに答えます。

知識の範囲は、GPT-4が2021年9月から2023年4月まで、GPT-3.5が2022年1月までと、延びています。

今は事情が違います。

GPT-3.5もGPT-4も、2026年10月時点のChatGPTでは選べません。

新しいモデルは、無料版でもWeb検索を使って答えられます。

当時は、いま流行のドラマやアニメなど、リアルタイムの情報には弱いとされていました。

GPT-3.5は「情報を提供できません」と答えますが、GPT-4はWeb検索ができるので、最新の情報を集めてくれます。


「2023年12月に起きた大きな出来事を10個教えてください」と聞くと、GPT-3.5は「私の知識は2022年1月までなので、2023年12月の出来事はお答えできません。信頼できるニュースソースをご覧ください」

と答えました。

GPT-4は、マダガスカル大統領の再選、中国とベトナムの貿易関係の強化、イスラエルとハマスの停戦延長、インドのトンネルに閉じ込められた労働者の救出など、10個を挙げました。

調べてみると、全部実際にあった出来事でした。

ただ、日本の出来事は1つもありません。

10個とも、その時期の出来事ではあるものの、一部は11月末の報道でした。

細かい期間の指定は、少し苦手なのかもしれません。


家電の故障は、メーカーに聞くのが早い

もう一つ、私の実家であった家電トラブルの例です。

プロパンガスのコンロで、点火ボタンを押したあと、手を離すとすぐに火が消えてしまうのです。

買ってから1年しかたっておらず、買い替えると2万円ほどかかります。

困ってChatGPTに質問しましたが、的確な答えは出ませんでした。


先に、本当の原因を書きます。

点火用の電池が弱っていたことでした。

電池を新しいものに替えたところ、問題なく使えるようになりました。

実は、電池が切れたとき、1年前に買っておいた未使用の電池に替えたのですが、直りませんでした。

メーカーに聞いたところ、未使用でも、買ってから時間がたった電池は電圧が弱くなり、点火後の火の調整ができず、すぐ消えてしまうそうです。

ネットの取扱説明書を見ると、トップページにそのことが、しっかり書いてありました。


ChatGPTには、「プロパンガス用のガスコンロを使っています。昨日から、点火後に手を離すと火が消えるようになりました。おそらく電池が原因だと思い、1年前に買った未使用の電池に替えましたが、直りません。できれば新品に買い替えたくないので、対処法を教えてください。」

と聞きました。

返ってきたのは、サーモカップルの点検（火が消えるとガスを止める安全装置が、うまく働いていない可能性。先端が火の中にあるか確認し、汚れを掃除する）

、電池の確認（正しくセットされているか、接触不良はないか、コンロに合う種類か）、ガスノズルの清掃、エアレーションの調整、専門家による点検の5つでした。

安全第一で、無理をせず専門家に相談するのが最善、という結びです。

正解に近いことは言っています。

ところが、メーカーに問い合わせると、すぐに「電池が原因の可能性が高いです」と教えてもらえました。

同じ問い合わせが多いからでしょう。

家電の故障は、まずメーカーに聞くのが、いちばん早いです。