2023/3/15にYouTubeで配信されたGPT-4 Developer Livestreamでは、ChatGPTに画像を送信してその画像を解釈させるデモが行われました。
しかし、デモの中でも、Join Greg Brockman, President and Co-Founder of OpenAI が述べていましたが、まだ画像のアップロード機能は一般向けの公開はしていないとのことでした。
以下のOpenAIのFAQでも、2023年9月上旬ころにGPT-4ではまだ画像を扱うことは出来ないと投稿されています。
How can I use GPT-4 with images? | OpenAI Help Center
We aren’t offering this as a service right now. We’re happy to hear that you’re excited about our services and when we have anything to release, we’ll announce this to the community.
Developer Livestreamでは、以下のように画像を用いた様々な可能性を感じさせるデモが行われました。
Developer Livestreamで披露された画像を用いたデモ
- ジョーク画像から、どこが面白いのかChatGPTに解釈を説明させる。
- Discordのスクリーンショット画像から、画面に何が配置されているか説明させる。
- 手書きのモックアップ画像からHTMLコードを生成させる。
2023年9月15日現在、GPT-4の画像機能はまだ利用できないものの、現在の文章の入力だけでも素晴らしい結果を出しています。しかし、今後、画像の入力も可能になると考えると、ますます楽しみな機能となるでしょう。