オープンAIのGPT-4oがAIの可能性を示す

2024年5月13日（月）、OpenAIは新しいフラッグシップモデル「GPT-4o」を発表した。GPT-4oは、リアルタイムのテキスト、音声、視覚インタラクションのための先進的なマルチモーダルAIモデルで、より高速な処理、多言語サポート、安全性の向上を提供する。

GPT-4oは、これまでに見たこともないようなジェネレーティブAIの機能を提供する。ChatGPT 、GPT-4oの会話能力をベースにしたこの機能は、AIに対する人々の認識を大きく前進させるものだ。私たちは今、GPT-4oとまるで本物の人間のように話すことができる。では、GPT-4oの能力を実際に見てみよう！

GPT-4oを知る

OpenAIの春のアップデートで、GPT-4oはGPT-4と同様にインテリジェントである一方、より高速にデータを処理でき、テキスト、視覚、音声を扱うのにより適していることが明らかになった。モデルをより賢くすることに重点を置いた以前のリリースとは異なり、今回のリリースは、AIを一般ユーザーがより使いやすくする必要性を念頭に置いて作られている。 

ChatGPT昨年末にリリースされたボイスモードでは、3つの異なるモデルが一緒になって、音声入力を書き起こし、文字入力を理解して返事を生成し、ユーザーが返事を聞けるようにテキストを音声に変換していた。このモードは待ち時間の問題があり、あまり自然には感じられなかった。GPT-4oは、テキスト、視覚、音声を一度にネイティブ処理することができ、ユーザーに自然な会話に参加しているような印象を与えることができる。 

また、音声モードとは異なり、GPT-4oが話している最中に割り込むことができるようになりました。一時停止して話を聞き、あなたが言ったことに基づいてリアルタイムで返答します。また、声で感情を表現したり、あなたの口調を理解することもできます。 

GPT-4oの特徴

GPT-4oのモデル評価は、その先進性を示しています。最も興味深い結果のひとつは、GPT-4oは、すべての言語、特にあまり一般的に使用されていない言語において、Whisper-v3と比較して音声認識を大幅に向上させていることです。 

音声ASR（自動音声認識）の性能は、モデルがどれだけ正確に話し言葉をテキストに書き写すかを測定します。GPT-4oの性能は、単語誤り率(WER)によって追跡されます。WERは、誤って書き取られた単語の割合を示します（WERが低いほど、品質が高いことを意味します）。下のグラフは、さまざまな地域でGPT-4oのWERが低いことを示し、低リソース言語の音声認識を改善する効果を実証しています。

GPT-4oのユニークな特徴をもう少し見てみよう：

• より速く - GPT-4 Turboの2倍の速さです。音声入力にわずか232ミリ秒で応答でき、これは人間の会話の応答時間に似ています。
• 費用対効果 - GPT-4oのAPIバージョンはGPT-4ターボより50%安い。
• 記憶力 - GPT-4oは異なる会話にまたがって意識を維持する能力を持っています。異なるチャットであなたが話している内容を記憶することができます。
• 多言語対応 - GPT-4oは、50の異なる言語においてスピードと品質が向上するようトレーニングされています。

GPT-4oでできることの例

携帯電話でGPT-4oを取り出し、カメラをオンにし、友人と同じようにGPT-4oに表情からあなたの気分を推測してもらうことができる。GPT-4oはカメラ越しにあなたを見て答えることができる。

GPT-4oを使えば、自分が書いているものをビデオで見せて、数学の問題を解く手助けをすることもできる。また、画面を共有すれば、カーンアカデミーのチューターとして、幾何学の三角形のさまざまな部分を指摘してもらうこともできる。

子供たちの算数を手助けするだけでなく、開発者はGPT-4oと会話してコードをデバッグすることができる。これは、ChatGPT がデスクトップアプリとして導入されたおかげで可能になった。デスクトップのGPT-4o音声アプリに話しかけながら、CTRL "C "でコードをハイライトしてコピーすれば、コードを読み取ることができる。また、異なる言語を話す開発者同士の会話を翻訳するために使うこともできる。 

GPt-4oの可能性は無限大のようだ。OpenAIの最も興味深いデモのひとつは、GPt-4oが2台の携帯電話を使って、GPt-4o自身の異なるインスタンスと会話し、一緒に歌うというものだった。

GPT-4o アプリケーション

デモで示されたように、GPT-4oは視覚障害者にとって世界をより身近なものにすることができる。GPT-4oは、視覚障害者にとって世界をより身近なものにすることができる。例えば、ユーザーはビデオをオンにし、GPT-4oに通りの景色を見せることができる。するとGPT-4oは、障害物の識別、道路標識の読み取り、特定の場所への誘導など、環境に関する説明をリアルタイムで提供することができる。また、タクシーが近づくと警告を発して、タクシーを呼ぶ手助けをすることもできる。

同様に、GPT-4oはその高度な機能で様々な業界を変革することができる。小売業では、リアルタイムの支援を提供し、問い合わせに答え、オンラインと店舗の両方で顧客が商品を見つけるのを支援することで、顧客サービスを向上させることができます。例えば、あなたが商品の棚を見ていて、探している商品を選ぶことができないとしよう。 

医療分野では、GPT-4oは患者データを分析し、症状から可能性のある疾患を示唆し、治療法の選択肢を提示することで診断を支援することができる。また、患者記録の要約、医学文献への迅速なアクセス、さらには異なる言語を話す患者とのコミュニケーションのためのリアルタイム言語翻訳を提供することで、医療専門家をサポートすることができます。これらはほんの一例に過ぎない。GPT-4oのアプリケーションは、状況に応じた支援を提供し、情報やコミュニケーションの障壁を取り除くことで、日常生活をより快適にします。

GPT-4oとモデルの安全性

何億人もの生活に影響を与えたGPTの前バージョンと同様に、GPT-4oはリアルタイムの音声やビデオとグローバルにやり取りする可能性が高く、これらのアプリケーションでは安全性が極めて重要な要素となる。OpenAIは、潜在的なリスクを軽減することに重点を置いてGPT-4oを構築することに細心の注意を払ってきました。

安全性と信頼性を確保するため、OpenAIは厳格な安全対策を実施している。これには、トレーニングデータのフィルタリング、トレーニング後のモデルの動作の洗練、音声出力を管理するための新しい安全システムの組み込みなどが含まれます。さらに、GPT-4oは、社会心理学、バイアスと公平性、誤報などの分野における70人以上の外部専門家によって広範囲にテストされています。外部テストにより、新機能によってもたらされる、あるいは増幅されるあらゆるリスクが特定され、対処されることが確認されている。

高い安全基準を維持するため、OpenAIはGPT-4oの機能を今後数週間かけて徐々にリリースしていきます。段階的な展開により、OpenAIはパフォーマンスを監視し、あらゆる問題に対処し、ユーザーからのフィードバックを収集することができます。慎重なアプローチをとることで、GPT-4oは安全性と倫理的使用の最高基準を維持しながら、高度な機能を提供することができます。

GPT-4oを試してみよう

GPT-4oは無料でご利用いただけます。上記のリアルタイム会話能力を試すには、Google Play StoreまたはApple App StoreからChatGPT アプリを直接携帯電話にダウンロードすることができます。 

ログイン後、画面右上の3つの点をタップすると表示されるリストからGPT-4oを選択できるようになる。GPT-4oで有効化されたチャットに移動後、画面左下のプラスマークをタップすると、複数の入力オプションが表示される。画面右下にはヘッドフォンのアイコンがあります。ヘッドフォンアイコンを選択すると、GPT-4oのハンズフリーバージョンを体験するかどうか尋ねられます。同意すると、以下のようにGPT-4oを試すことができます。

GPT-4oの高度な機能をご自身のプロジェクトに統合したい場合、開発者向けのAPIとしてご利用いただけます。これにより、GPT-4oの強力な音声認識、多言語サポート、リアルタイムの会話能力をアプリケーションに組み込むことができます。APIを使用することで、ユーザー体験を向上させ、よりスマートなアプリを構築し、さまざまな分野に最先端のAI技術を導入することができます。

GPT-4o：まだ人間ではない

GPT-4oは以前のAIモデルよりもはるかに進化しているが、GPT-4oには独自の限界があることを忘れてはならない。OpenAIは、会話中にランダムに言語が切り替わり、English からフランス語になることがあると述べている。また、GPT-4oが言語間の翻訳を誤ることもあるという。より多くの人がこのモデルを試すことで、GPT-4oの優れているところと、さらなる改善が必要なところがわかってくるでしょう。

結論

OpenAIのGPT-4oは、高度なテキスト、視覚、音声処理でAIの新しい扉を開き、人間のような自然なインタラクションを提供します。スピード、コスト効率、多言語サポートの面で優れています。GPT-4oは、教育、アクセシビリティ、リアルタイムの支援など、多目的に使えるツールです。ユーザーがGPT-4oの機能を探求するにつれ、フィードバックがGPT-4oの進化の原動力となるでしょう。GPT-4oは、AIが私たちの世界を真に変え、日常生活の一部になりつつあることを証明している。 

GitHub リポジトリを 探索し、私たちのコミュニティに参加して、AI を深く掘り下げましょう。ソリューションのページでは、AIが製造業や農業などの産業をどのように変革しているかをご覧いただけます。