ChatGPT-4oは餃子をどこまで知っているのか、会話で確かめてみた

音声で会話できるChatGPT-4oを餃子で試す

00:00 から再生する

この回では、2024年5月13日に発表されたChatGPT-4oを使った検証が行われています。

このモデルでは音声を聞いて音声で返すことができるようになり、会話でAIを使えるようになりました。

さらに、これまでの古い情報ではなく、インターネット上の最新情報を用いて返答してくれるようになったといいます。

小野寺さんは、この機能を使ってChatGPTが餃子についてどれくらい答えてくれるのかを試していきます。

餃子の一般知識はどこまで正確か

01:12 から再生する

最初の質問は「日本の餃子について詳しいか」というものでした。

ChatGPTは、日本の餃子の歴史を第二次世界大戦後に中国から帰還した日本人が広めたものと説明します。特に満州からの帰還者が広めたと話しました。

続けて、焼き餃子、水餃子、揚げ餃子という種類や、宇都宮と浜松という代表的な地域、醤油・酢・ラー油を混ぜたタレなどを挙げていきます。

小野寺さんは、発音や表記に課題はあるものの、内容についてはおおむね間違いのない情報だと評価しています。

人気店の紹介に見えた「変化球」

04:19 から再生する

次に小野寺さんは「日本で人気の餃子店」を尋ねます。ChatGPTは8軒を挙げました。

1位は宇都宮みんみん、3位は大連餃子基地(ダリアン)などが並びますが、小野寺さんは細かい情報のずれを一つずつ指摘していきます。

2位の餃天堂は「静岡県三島市」と説明されましたが、小野寺さんはこれもおそらく宇都宮のことだろうと話します。

3位のダリアンは「東京都中目黒」とされたものの、中目黒にはなく、麻布十番のあたりにあると思われると指摘しました。

8位に挙がった天のびろく(十勝平野のマッシュルームを使った餃子)については、店舗というより工場やお取り寄せが主力だとして、変化球だったと振り返っています。

なぜこの4軒なのか、AI時代の情報の出どころ

07:49 から再生する

さらに絞って「東京都内で人気の餃子店」を尋ねると、ChatGPTは4軒を挙げました。

1軒目のファイト餃子は、巣鴨にあるホワイト餃子の流通連鎖店だと小野寺さんは補足します。

4軒目の「三鷹大餃子」については、小野寺さんは店名に心当たりがなく、おそらくハルピンのことではないかと推測しています。

なぜ他にも多くの店がある中で、この4軒が選ばれたのか。小野寺さんは各店に付いたリンクをたどって出どころを探ります。

リンク先はまとめサイトのようなページで、しかもそのまとめサイトに載っていない情報もあり、選定の根拠ははっきりしなかったといいます。

ここから小野寺さんは、AIに向けた情報最適化という視点を語ります。

レシピのような一般情報にAIは強い

10:44 から再生する

最後は店舗を離れ、餃子に使う豚肉の部位を尋ねました。

ChatGPTは、肩ロース、豚バラ肉、豚ひき肉の3つを挙げ、それぞれの特徴を説明します。

ジューシーに仕上げるには適度な脂肪が必要で、赤身と脂身の割合は7対3から6対4程度が理想だと答えました。

小野寺さんは、この回答をピンポイントでわかりやすく、おおむね正確だと評価しています。

どのサイトを見ても似た内容になる一般的なレシピは、AIがまとめやすい分野だと話しました。

AIは信頼しきれないが、整理役としては有用

12:48 から再生する

検証を終えて、小野寺さんはChatGPTの答えがすべて正確ではなく、現時点で全部を信頼するのは難しいと話します。

一方で、参考になる情報を大枠で整理してくれる点は評価し、AIに正しい情報を教えて学習してもらうことが今後大切だとまとめています。

また、AIはChatGPTだけではなく、Anthropic社のClaude 3やGoogleのGeminiなど様々なプラットフォームがあると紹介します。

それらが競い合う中でそれぞれの得意分野が生まれ、新しいAIも登場するかもしれないとして、今後もこの領域に注目したいと締めくくりました。

まとめ

ChatGPT-4oは、餃子の歴史やレシピといった一般的な情報には強い一方で、店舗の所在地や店名には誤りが見られ、現時点では答えをそのまま信頼するのは難しいことがわかりました。整理役として使いつつ、正しい情報を教えていく姿勢が重要だと語られています。