COLUMN

ChatGPTの最新モデルGPT-4oとは?旧モデルやClaude3(Sonnet)との性能差を比較してみた

クラウド活用に関するさまざま情報をお届けするメルマガを毎週配信しておりますので、ぜひこの機会にご登録ください。

こんにちは、クラウドエンジニアの眞鍋です。

2024年5月13日(米国時間)に、ChatGPT の最新モデル GPT-4o が発表されました。

そこで今回は、「他のモデルとどう違うの?」「性能が気になる!」という方向けに、ChatGPT の旧モデルや Claude3 との比較検証を行ってみました。

本記事では、GPT-4o の概要や特徴を抑えつつ、検証の結果どのような違いがあったのかをご紹介します。

1. GPT-4oとは?

1-1. GPT-4oの概要と特徴

GPT-4o(ジーピーティーフォーオー/ジーピーティーフォーオムニ)は、テキスト・オーディオ・画像・ビデオの入出力機能を備えた生成AIの最新モデルです。

GPT-4oは旧モデルと比較して、主に以下のような特徴があります。

  • 精度や速度が向上し、より自然なリアルタイム生成が可能になった
  • 日本語での消費トークン数が少なくなった
  • APIの利用料金が入力と出力ともに約50%安くなった

性能面でも費用面でも、これまでのモデルの上位互換となっています。

1-2. GPT-4oの利用料金

2024年6月現在、GPT-4oはChatGPTの有料プラン・無料プランのどちらでも使用可能です。但し、無料プランでは下記の様に一部機能に制限がありますのでご注意ください。

機能 無料プラン 有料プラン(ChatGPT Plus)
画像読み込み
画像生成 -
WEBからの情報取得
データ分析
音声会話
GPTsの利用
GPTsの作成 -

GPT-4oを有料プラン(ChatGPT Plus)で使用する場合、基本料金「$20 / 月」に加えてAPIの使用量に応じて下記の料金が発生します。

項目 料金
入力 $5.00 / 100万トークン
出力 $15.00 / 100万トークン

最新の料金については、公式サイトをご確認ください。

クラウド活用に関するさまざま情報をお届けするメルマガを毎週配信しておりますので、ぜひこの機会にご登録ください。

2. GPT-4oとその他のモデルの生成結果を比較してみた

ここからは、実際に各モデルを使用して生成結果を比較してみます。

各モデルに「野球」をテーマになぞかけをしてもらい、なぞかけを正しく認識できているのか、どのような回答が得られるのかを検証します。

2-1. GPT-3.5の場合

このような結果になりました。

まず、「野球とかけまして」という文言がどこにも見当たらず、なぞかけを正しく認識できていないようです。

ただ、フライドポテト(Fly’d poteto)に関しては、フライドポテトの「Fly」と、フライボールの「フライ」が同音異義語となっており、偶然かもしれませんがなぞかけのオチのような雰囲気が出ています。

とはいえ、野球選手が一番好きなおやつがフライドポテトというのはやはり変なので、GPT-3.5はそもそもなぞかけを正しく認識できていない、という結果となりました。

2-2. GPT-4の場合

結果を確認していきます。

まず、「○○とかけまして、○○とときます。その心は?どちらも○○」という回答になっており、正しくなぞかけのルールを認識できていることが分かります。

ただ、オチのどちらも「バッター(打者)」が重要です。ですが、銀行のバッターとはなんのことでしょうか。

GPT-4に聞いてみます。

やはり、GPT-4自身も銀行のバッターが何のことかは分かっていないようです。

一瞬なぞかけができているように見えましたが、オチが銀行と全く関係がなく、GPT-4でもなぞかけは上手くできない、という結果になりました。

2-3. Claude3(Sonnet)の場合

次は、2024年3月に発表されたAnthropicの最先端モデルであるClaude3(Sonnet)でも検証してみます

まず、なぞかけについて「日本の伝統的な言葉遊び」「同音異義語」等のワードが出てきており、なぞかけの概要は理解できているようですが「○○とかけまして」のような形にはなっていません。

なぞかけ部分も見ていきます。

「ホームラン」は野球で最も華やかな打撃ですが、同時に「焼きそば」とも聞こえます、と書かれてありますが、聞こえません。

残念ながらなぞかけ部分は文章として破綻してしまっており、Claude3(Sonnet)でも正しくなぞかけはできない、という結果となりました。

2-4. GPT-4oの場合

最後に、GPT-4oになぞかけに挑戦してもらいます。

まず、「○○とかけまして、○○とときます。その心は?どちらも○○」という回答になっており、正しいなぞかけの形になっています。

次に、旅行の「バッテリー」が何を指しているのかを聞いてみます。

旅行の「バッテリー」は、モバイルバッテリーを指しているようです。

というわけで、野球で大事な「バッテリー(ピッチャーとキャッチャー)」と、旅行で大事な「バッテリー(モバイルバッテリー)」が同音異義語となっており、綺麗にオチています。

GPT-4oは正しくなぞかけができた、という結果となりました。

クラウド活用に関するさまざま情報をお届けするメルマガを毎週配信しておりますので、ぜひこの機会にご登録ください。

3. まとめ

今回は検証しませんでしたが、GPT-4oは画像やグラフの認識・生成能力も向上しており、使いこなすことで業務の効率化を図ることが可能です。

2024年6月現在、GPT-4oはChatGPTの無料ユーザーでも制限付きで使用可能な為、気になる方は是非実際に触ってみてはいかがでしょうか。

本記事に記載されている会社名、サービス名、商品名は、各社の商標または登録商標です。

ページ上部へ戻る

無料ダウンロード

自社のクラウド導入に必要な知識、ポイントを
このに総まとめ!

あなたはクラウド化の
何の情報を知りたいですか?

  • そもそも自社は本当にクラウド化すべき?オンプレとクラウドの違いは?
  • 【AWS・Azure・Google Cloud】
    どれが自社に最もマッチするの?
  • 情シス担当者の負荷を減らしてコストを軽減するクラウド化のポイントは?
  • 自社のクラウド導入を実現するまでの具体的な流れ・検討する順番は?

初めての自社クラウド導入、
わからないことが多く困ってしまいますよね。

NTT東日本では
そんなあなたにクラウド導入に必要な情報を

1冊の冊子にまとめました!

クラウド化のポイントを知らずに導入を進めると、以下のような事になってしまうことも・・・

  • システムインフラの維持にかかるトータルコストがあまり変わらない。。
  • 情シス担当者の負担が減らない。。
  • セキュリティ性・速度など、クラウド期待する効果を十分に享受できない。。
理想的なクラウド環境を実現するためにも、
最低限の4つのポイントを
抑えておきたいところです。
  • そもそも”クラウド化”とは?
    その本質的なメリット・デメリット
  • 自社にとって
    最適なクラウド環境構築のポイント
  • コストを抑えるため
    具体的なコツ
  • 既存環境からスムーズにクラウド化
    実現するためのロードマップ

など、この1冊だけで自社のクラウド化のポイントが簡単に理解できます。
またNTT東日本でクラウド化を実現し
問題を解決した事例や、
導入サポートサービスも掲載しているので、
ぜひダウンロードして読んでみてください。

クラウドのわからない・
面倒でお困りのあなたへ

クラウドのご相談できます!
無料オンライン相談窓口

NTT東日本なら貴社のクラウド導入設計から
ネットワーク環境構築・セキュリティ・運用まで
”ワンストップ支援”が可能です!

NTT東日本が選ばれる5つの理由

  • クラウド導入を
    0からワンストップでサポート可能!
  • 全体最適におけるコスト効率・業務効率の改善
    中立的にご提案
  • クラウド環境に問題がないか、
    第3者目線でチェック
    してもらいたい
  • 安心の24時間・365日の対応・保守
  • NTT東日本が保有する豊富なサービスの組み合わせで
    ”課題解決”と”コスト軽減”を両立

特に以下に当てはまる方はお気軽に
ご相談ください。

  • さまざまな種類やクラウド提供事業者があってどれが自社に適切かわからない
  • オンプレミスのままがよいのか、クラウド移行すべきなのか、迷っている
  • オンプレミスとクラウド移行した際のコスト比較を行いたい
  • AWSとAzure、どちらのクラウドが自社に適切かわからない
  • クラウド環境に問題がないか、第3者目線でチェックしてもらいたい
  • クラウド利用中、ネットワークの速度が遅くて業務に支障がでている

クラウドを熟知するプロが、クラウド導入におけるお客さまのLAN 環境や接続ネットワーク、
クラウドサービスまでトータルにお客さまのお悩みや課題の解決をサポートします。

相談無料!プロが中立的にアドバイスいたします

クラウド・AWS・Azureでお困りの方はお気軽にご相談ください。