剛剛過去的Ignite 2023大會(huì)上，納德拉曾宣布Bing Chat全線更名Copilot，并表示：

Copilot無處不在。

今天，微軟再次推出Copilot一系列重磅級(jí)更新。

它將集成OpenAI最新模型GPT-4 Turbo、DALL-E 3、以及代碼解釋器（Code Interpreter）能力，并在未來幾周推出。

另外，必應(yīng)還開始了AI「深度搜索」功能的內(nèi)測，可以把簡單問題瞬間轉(zhuǎn)化為詳細(xì)的提示，不會(huì)prompt也不用怕了。

如此看來，你還有必要買ChatGPT Plus的會(huì)員嗎？網(wǎng)友做了一張對(duì)比圖。

Copilot年度升級(jí)，GPT-4 Turbo免費(fèi)用

早在今年2月，微軟首次推出了直接對(duì)標(biāo)ChatGPT的聊天機(jī)器人——Bing Chat。

這也就是，AI助手Copilot初次以這樣的方式誕生。

自此十個(gè)月左右的時(shí)間，GPT-4加持全新Copilot正式接入Office全家桶、Windows 11、Edge瀏覽器，以及Microsoft 365訂閱服務(wù)。

再到Ignite大會(huì)上，Bing Chat全線更名Copilot后，微軟宣布每個(gè)人都將有一個(gè)AI Copilot。

而現(xiàn)在，最令人振奮的是，OpenAI最新的GPT-4 Turbo模型，馬上也能在Copilot用上了。

128k超長上下文，意味著Copilot將擁有更強(qiáng)的理解查詢能力，處理更復(fù)雜、更長的任務(wù)。

另外，更新后DALL-E 3模型也將集成到Copilot中，能夠創(chuàng)建更高質(zhì)量、更符合提示的圖像。

DALL-E 3模型的改進(jìn)

所有的Edge用戶可以通過Copilot在網(wǎng)頁上輕松實(shí)現(xiàn)編寫。只需選擇要更改的文本，然后讓Copilot重寫即可。

前段時(shí)間，已經(jīng)有網(wǎng)友在Reddit上發(fā)布了自己體驗(yàn)這一新功能的效果。

你還可以使用Edge中的Copilot，匯總在YouTube上觀看的視頻。

多模態(tài)搜索（search grounding）能力也將推出。微軟將GPT-4的強(qiáng)大視覺能力，與必應(yīng)圖像搜索和網(wǎng)絡(luò)搜索數(shù)據(jù)相結(jié)合，就可以實(shí)現(xiàn)更好的圖片搜索。

就比如，以前發(fā)送一張圖，模型只會(huì)給出描述。而search grounding能夠給出火箭的型號(hào)、發(fā)射的具體日期。

多模態(tài)搜索

Copilot也將得到code interpreter能力的加持。開發(fā)者便可以通過Copilot就能獲得更準(zhǔn)確的計(jì)算、數(shù)據(jù)分析，甚至是代碼。

用戶還可以在Copilot上傳和下載文件，這樣就可以使用自己的數(shù)據(jù)和代碼，以及必應(yīng)的搜索結(jié)果。

微軟表示，Copilot將編寫代碼來回答復(fù)雜的自然語言請(qǐng)求，在沙盒環(huán)境中運(yùn)行該代碼，并使用結(jié)果為用戶提供更高質(zhì)量的回復(fù)。

Copilot全新code interpreter功能

Copilot強(qiáng)大的Python環(huán)境在Azure Container應(yīng)用程序之上構(gòu)建的安全沙箱環(huán)境中運(yùn)行。

它提供了快速、與用戶隔離的環(huán)境，并且預(yù)裝了許多流行的數(shù)據(jù)科學(xué)工具和庫，如 pandas、numpy、matplotlib、sklearn、flask 等，以解決復(fù)雜的問題。

你可以將Copilot從Bing搜索和網(wǎng)絡(luò)上獲得的數(shù)據(jù)，與上傳的文件中的數(shù)據(jù)結(jié)合起來，進(jìn)而獲得深入相關(guān)的洞察，以及更好的交互式的輸出。

AI深度搜索，30秒解答更全面

在必應(yīng)中，微軟也將推出全新功能「深度搜索」，完全是不會(huì)prompt用戶的福音。

「深度搜索」基于必應(yīng)的網(wǎng)絡(luò)索引和排名系統(tǒng)之上，并得到了GPT-4的加持。

這樣，當(dāng)你在在查詢問題時(shí)，「深度搜索」可以對(duì)提示進(jìn)行擴(kuò)展，進(jìn)而讓搜索引擎能夠找到與問題相關(guān)的多個(gè)主題的答案。

不過，若想使用「深度搜索」這一功能，必須得有耐心。

一次「深度搜索」需要長達(dá)30秒的時(shí)間，而必應(yīng)的常規(guī)搜索，可以在不到1秒時(shí)間內(nèi)給出結(jié)果。

了解搜索意圖

舉個(gè)栗子，必應(yīng)能夠?qū)ⅰ溉毡痉e分系統(tǒng)如何運(yùn)作」這樣模糊的提示，轉(zhuǎn)化為更加全面的提示描述：

解釋各種會(huì)員卡計(jì)劃在日本的運(yùn)作方式，包括每種計(jì)劃的好處、要求和限制。舉例說明不同類別（例如便利店、超市和餐館）的流行會(huì)員卡。比較在日本使用會(huì)員卡和其他支付方式的優(yōu)缺點(diǎn)，包括當(dāng)前的獎(jiǎng)勵(lì)和優(yōu)惠。重點(diǎn)介紹最受歡迎的服務(wù)和參與商戶。

不過，有些查詢是模棱兩可的。

還拿上面的例子來看，「積分系統(tǒng)在日本如何運(yùn)作」可以指獎(jiǎng)勵(lì)積分，但也可以指有關(guān)移民政策或其他方面的信息

這時(shí)，「深度搜索」通過GPT-4來查找所有可能的意圖，將搜索范圍擴(kuò)大到移民政策和公共交通票價(jià)的描述。

如果你的意圖被誤解了，你可以從下面的提示窗口中，選擇貼切的方向。

尋找更深層次的答案

必應(yīng)會(huì)以這項(xiàng)任務(wù)為中心，對(duì)網(wǎng)絡(luò)進(jìn)行更深入的搜索，并拉回通常不會(huì)出現(xiàn)在典型搜索結(jié)果中的相關(guān)結(jié)果。

深度搜索結(jié)合使用了多種查詢技術(shù)，以查找可能與用戶擴(kuò)展查詢相匹配的網(wǎng)頁，代表用戶改寫查詢，并搜索重寫后的查詢。

比如，對(duì)于「積分查詢」，「深度搜索」可能還會(huì)嘗試搜索：

- 日本會(huì)員卡計(jì)劃 

- 日本最適合旅行者的會(huì)員卡 

- 按類別對(duì)日本忠誠度計(jì)劃比較 

- 在日本兌換會(huì)員卡 

- 使用手機(jī)應(yīng)用管理忠誠度積分

這樣一來，「深度搜索」可以找到涵蓋查詢不同方面的結(jié)果，即使這些結(jié)果沒有明確包含原始關(guān)鍵詞。

在必應(yīng)上進(jìn)行常規(guī)搜索時(shí)，每次搜索都要涉及數(shù)百萬個(gè)網(wǎng)頁，而「深度搜索」的搜索結(jié)果要比常規(guī)搜索排名靠前的結(jié)果多10倍，信息量更大、更具體。

搜索結(jié)果排序

可以看到，必應(yīng)搜索到的任何主題，都將顯示在搜索結(jié)果的面板中。

然后，你可以選擇最適合自己要查找的內(nèi)容，「深度搜索」將通過與綜合描述的匹配程度，對(duì)搜索結(jié)果進(jìn)行排序。

「深度搜索」通過各種信號(hào)來確定每個(gè)結(jié)果的相關(guān)性和質(zhì)量，同時(shí)考慮主題匹配程度、是否達(dá)到了適當(dāng)?shù)脑敿?xì)程度、來源的可信度和可信度、新鮮度和流行度等。

微軟在官方博客中表示，「深度搜索」適合對(duì)于有復(fù)雜問題并且不滿足于簡單答案的用戶而設(shè)計(jì)，是一個(gè)可選項(xiàng)。

視頻理解和問答

另外，你還可以在Edge瀏覽器上還可以對(duì)正在觀看的視頻進(jìn)行總結(jié)或提問。

比如，讓Copilot幫忙總結(jié)一下納德拉最新的Ignite主題演講視頻。

或者是老黃在Computex 2023的演講。

可以看到，Copilot給出的關(guān)鍵點(diǎn)還是相當(dāng)準(zhǔn)確的——在視頻25分鐘的時(shí)候，老黃發(fā)布了全新的定制AI模型服務(wù)Avatar Cloud Engine (ACE) 。

目前，這個(gè)功能已經(jīng)正式上線，有興趣的讀者可以去嘗試嘗試～