夕小瑤科技說 原創(chuàng)
 作者 | 小戲、ZenMoore

就在今天！OpenAI 悶聲放了一個大招！

圖片

還沒有官宣，還沒有發(fā)布會，也沒有大肆報(bào)道與關(guān)注。OpenAI 這次僅僅以灰度測試的方式，給部分用戶發(fā)布了一個可以說“整合了幾乎所有可用工具”的完全版 GPT-4 智能體版本。

再具體一點(diǎn)，這次更新，將之前版本相互獨(dú)立各自分離的 Agent 功能統(tǒng)一了起來。之前 GPT-4 的工作模式是四個獨(dú)立的功能（一個對話窗口內(nèi)只能使用其中一個特性）：

• 圖像上傳 + GPT-4
• 插件 + GPT-4
• 代碼運(yùn)行器 + 文件上傳 + GPT-4
• 圖像生成 + GPT-4

這次更新使其變成了：

• GPT-4 + 圖像上傳 + 插件 + 代碼運(yùn)行器 + 文件上傳 + 圖像生成

All In One!

例如，我想實(shí)現(xiàn)扔給 GPT-4 一張圖，讓 GPT-4 完成圖像理解再根據(jù)我的 Prompt 要求完成新圖像的生成，之前的 GPT-4 是無法做到這個事情的，因此當(dāng)你使用圖像生成功能的時候就無法上傳圖片。而更新完成之后，現(xiàn)在可以做到自動圖像編輯啦！ 如下圖所示：

圖片

這看似是一個小小的更新，但實(shí)際上是通過把之前分開的各種 Agent Feature 整合在一起從而將 GPT-4 真正進(jìn)化為了一個“理解一切，處理一切，生成一切”的超級統(tǒng)一智能體！

回顧 OpenAI 的官方說明，可能其中最為關(guān)鍵的詞句就是其中的“automatic”一詞

圖片

什么是“automatic”，那就是針對用戶輸入的任意一個任務(wù)，現(xiàn)在的 GPT-4 可以自動的選擇并組合使用各種它可以使用的工具，以完成用戶的特定的任務(wù)目標(biāo)。換言之，之前通過用戶人為切換插件完成的任務(wù)，更新后的 GPT-4 (All Tools) 類似 AutoGPT，可以一體化的完成如意圖識別，任務(wù)分配，工具調(diào)用等諸多任務(wù)，GPT-4 也由此完成了單一的大模型到智能體的進(jìn)化。

圖片

舉個網(wǎng)友的例子，如果我希望讓 GPT-4 生成一個當(dāng)前時間丹佛的天氣圖，拆解這個任務(wù)，GPT-4 需要做的不僅僅是使用 DALLE 3 生成一張圖片，而是還需要查詢當(dāng)前時刻丹佛的天氣，這需要調(diào)用另一個 API，而如下圖所示，GPT-4（All Tools）現(xiàn)在可以自動的完成這一套任務(wù)。

圖片

再來一個更復(fù)雜的任務(wù)，如果要求 GPT-4 依次反復(fù)使用它所能使用的所有工具來生成一張炫酷有趣的創(chuàng)意圖片，GPT-4 會怎么樣呢？

圖片

如上圖所示，GPT-4 完美的理解了任務(wù)的要求，首先使用了 DALLE 創(chuàng)建初始圖像，并以“抽象”，“懷舊”，“希望”等為主題設(shè)計(jì)了輸入 DALLE 的 Prompt，生成了初始的圖像

圖片

接著通過調(diào)用 Python，分析生成圖像中的顏色，確定主導(dǎo)色調(diào)，最終經(jīng)過一系列 GPT-4 的神操作，GPT-4 交出了這樣一個答卷，先不論其中藝術(shù)性如何，但可以看出 GPT-4 已經(jīng)可以熟練的玩轉(zhuǎn)各種工具。

圖片

再來一個例子，對于一個 PDF 信息提取的任務(wù)，之前的版本可能還需要額外使用 Advanced Data Analysis 功能上傳附近才可以辦到，而新版本的 GPT-4 則將多類型文件完全統(tǒng)一，直接上傳 PDF 便可以和 GPT-4 暢快 Chat。

圖片

當(dāng)然，目前的目前，GPT-4 的這次升級還沒有正式發(fā)布，只是以灰度測試的形式“走漏了一點(diǎn)風(fēng)聲”，不過哪怕僅僅看到這些蛛絲馬跡，但也足夠讓人期待完全版 GPT-4 會為我們帶來什么樣的想象空間。

圖片