OpenAI宣布其GPT-4Turbo with Vision現已在API中正式推出。現在可以透過文字格式的JSON和函數呼叫來請求使用模型的視覺識別和分析能力,產生JSON程式碼片段,開發人員可以用它來自動化其連接應用程式中的操作,例如「發送電子郵件、在網路上發布內容、進行購買」等。 OpenAI在其API頁面上指出,我們強烈建議在代表使用者採取影響世界的行動之前,建立使用者確認流程。 OpenAI發言人表示,這些變更有助於簡化開發人員的工作流程並打造更有效率的應用程序,因為「以前,開發人員必須對文字和圖像使用單獨的模型,但現在,只需一次API調用,該模型就可以分析圖像並應用推理。”