世界最大AI Agent生態(tài)系統(tǒng)!微軟推出全新「自主AI智能體」,10萬企業(yè)工作流被改變
微軟正在悄悄改變企業(yè)AI的游戲規(guī)則!
現(xiàn)在,微軟已經(jīng)悄悄組建了世界最大的AI智能體生態(tài)系統(tǒng),
自推出以來,已經(jīng)有超過10萬家公司,用Copilot Studio創(chuàng)建了自己的AI智能體。
比如,麥肯錫通過自動化的流程分配智能體,將項目受理流程從20天縮短至僅2天;Pets at Home在不到兩周內(nèi)部署了防欺詐智能體,每年節(jié)省數(shù)百萬美元……
「這個增長速度遠超我們的預(yù)期,也遠超我們發(fā)布的其他任何前沿技術(shù)的表現(xiàn),」微軟智能體負責人Charles Lamanna透露道,「僅僅一個季度,就實現(xiàn)了2倍的增長?!?/span>
在昨天的Ignite大會上,微軟更是重磅宣布:企業(yè)可以在智能體中,使用Azure目錄中1800個LLM中的任何一個模型了!這就意味著,微軟不再依賴于OpenAI的獨家模型。
同時,微軟還全新推出了可以獨立工作的自主AI智能體,它們可以檢測事件,在最低程度的人為干預(yù)下,來參與進我們復(fù)雜的工作流。
這些AI智能體能自主推理,還能操作執(zhí)行特定任務(wù)的軟件。從此,企業(yè)的生產(chǎn)力又將更進一步。
Copilot
Word
在Word中,Copilot將幫助你查找相關(guān)的來源和額外的內(nèi)容,以便進行草擬。
當開始撰寫新文檔時,Copilot會找到相關(guān)的文件、電子郵件和會議記錄,并基于它們創(chuàng)建草稿。在撰寫文檔過程中,Copilot會在整個文檔中顯示這些來源,并讓你選擇是否在草稿中保留引用。
該功能從11月開始在Word網(wǎng)頁版中提供,并于2025年初在桌面端推出。
Copilot還會根據(jù)語氣、結(jié)構(gòu)和故事性等方面提供改進建議,幫助你提升文檔質(zhì)量。該功能目前提供公共預(yù)覽版。
只需在Copilot聊天窗格中輸入提示,它就可以在文檔中智能檢索并添加SharePoint組織資源庫中的相關(guān)圖像,也可以使用DALL-E 3生成相關(guān)的新圖像。該功能將于本月推出。
Excel
無論是創(chuàng)建項目預(yù)算、庫存跟蹤器還是銷售報告,從零開始創(chuàng)建一個符合需求的電子表格可能既令人畏懼又耗時。
現(xiàn)在,Copilot可以幫你解決。只需告訴Copilot想要創(chuàng)建什么,Copilot就會根據(jù)你的需求建立一個模板。該功能將于年底前開始向擁有Microsoft 365 Copilot許可證的Windows和網(wǎng)頁用戶推送。
例如,你可以快速創(chuàng)建一個公司銷售團隊的表格。Copilot可以添加列、應(yīng)用條件格式,甚至按指令更改表格顏色。只要你對表格滿意,你就可以將其插入頁面并繼續(xù)使用Copilot。
在Excel中,Copilot可以引用企業(yè)內(nèi)部數(shù)據(jù)中的Word、Excel、PowerPoint和PDF文件了。
如果讓Copilot在Excel中列出Word文檔中草擬的新聞稿中的公告,它會給出一個列表,讓我們插入到新表格中,或者復(fù)制粘貼到現(xiàn)有的表格中。
在專注于工作流的同時,我們就可以輕松獲得企業(yè)信息,比如讓Copilot提供某位特定經(jīng)理的所有直屬員工名單,將其插入到電子表格中。
另外,我們還可以在Excel的Copilot中無縫進行網(wǎng)絡(luò)搜索,在不打亂工作流的情況下,查找日期、統(tǒng)計數(shù)據(jù),或者查找各國匯率的表格,把這些信息復(fù)制粘貼到自己的表格中。
你還可以用自然語言從Excel文件中查找和導入表格。
對于文本密集型的Excel表格,例如客戶反饋和調(diào)查結(jié)果,Copilot的文本分析功能可以幫助你更深入地理解這些數(shù)據(jù)。只需讓Copilot總結(jié)你的文本數(shù)據(jù),它還會附上引用信息,幫助你了解數(shù)據(jù)來源。
Copilot還可以將文本數(shù)據(jù)按主題分類和排序,幫助你更快速地分析非結(jié)構(gòu)化的文本數(shù)據(jù)。例如,如果你有數(shù)千條客戶評論,Copilot可以將它們劃分為多個主題,如質(zhì)量、服務(wù)和價格,幫助你快速確定需要進一步關(guān)注的主題。
你還可以將這些主題插入表格中的新列,保留分析結(jié)果,并創(chuàng)建數(shù)據(jù)透視表和圖表,直觀呈現(xiàn)主題的數(shù)量和趨勢。
PowerPoint
和Word的部分功能類似,Copilot也支持優(yōu)化文本、插入圖片。
此外,Copilot的Presentation Translator功能可以將演示文稿翻譯成40種語言,可翻譯的內(nèi)容包含文本框、形狀、表格、圖表、演講者備注、評論以及Smart-Art中的文字。
Copilot會自動為所有幻燈片生成演講者備注,為你提供一個可靠的初稿,你可以根據(jù)需要進一步修改。
通過簡單的提示和一個Word文件,Copilot的Narrative Builder能夠依據(jù)它們起草一個PPT初稿。
Copilot Pages新增功能
在9月,微軟發(fā)布了Copilot Pages——一個為多人AI協(xié)作設(shè)計的動態(tài)、持久畫布。
除了文本,Pages現(xiàn)在還支持更多內(nèi)容類型,如代碼、互動圖表、表格、圖示和數(shù)學公式。
這些組件可以基于網(wǎng)頁或工作數(shù)據(jù)在BizChat中創(chuàng)建,并且它們可以進行實時交互和動態(tài)修改,能夠在通過Outlook、Teams等Microsoft 365應(yīng)用分享時保持同步。
Copilot Pages還增加了多頁面支持,你可以在單個聊天會話中創(chuàng)建多個新頁面,或者將來自多個聊天會話的內(nèi)容添加到單個頁面中。
此外,你還可以在移動設(shè)備上編輯和分享Pages,從而實現(xiàn)多端多人協(xié)作。
所有這些功能將在2025年初正式推向Pages。
微軟全家桶的其他成員
在Outlook中,通過Copilot,用戶可以使用自然語言來安排會議。Copilot還能幫助你起草會議議程,包括摘要和關(guān)鍵要點。
在OneNote中,借助Copilot Chat,你可以通過自然語言命令,總結(jié)筆記內(nèi)容、創(chuàng)建任務(wù)列表或重寫筆記內(nèi)容。
此外,Copilot還能幫助你在幾秒鐘內(nèi)整理筆記本的章節(jié)。在OneNote應(yīng)用中打開Copilot,輸入「整理這個章節(jié)」,Copilot就會自動整理您的筆記頁面。
而Facilitator智能體將在2025年初支持Teams會議室功能,能夠為會議室內(nèi)外的所有與會者實時記錄并顯示筆記。
Facilitator智能體還支持說話者識別的功能。這一功能將支持更多會議場景,從Teams會議室到自帶設(shè)備(BYOD)的會議室,能夠識別房間內(nèi)的聲音和人員,讓每位發(fā)言者清晰可見。說話者識別還使Copilot、Facilitator以及智能會議回顧能夠正確識別發(fā)言人,確保會議記錄和行動項歸屬準確無誤。
此外,微軟還推出了一款新的AI翻譯器,可以模擬發(fā)言者的聲音,在Teams平臺上提供九種語言的近實時語音翻譯,包含中文(普通話)、英語、法語、德語、意大利語、日語、韓語、葡萄牙語(巴西)和西班牙語。
目前該功能正在一小部分用戶中進行測試,預(yù)計將在2025年向擁有Microsoft 365 Copilot許可證的賬戶廣泛開放。
Copilot Studio
正如開篇所述,微軟對于Copilot Studio的更新可謂是相當重磅。
1. 擴展知識管理功能
開發(fā)者可以使用最新的生成模型,實時更新并引用第三方數(shù)據(jù)源,利用檢索增強生成(RAG)功能,提升其智能體的質(zhì)量。
2. 新增分析功能
開發(fā)者可以根據(jù)特定結(jié)果篩選圖表,以了解關(guān)鍵績效指標(KPI)和客戶滿意度。
3. 新增語音和圖像功能
現(xiàn)在可以加入語音解決方案,包括互動語音應(yīng)答(IVR)系統(tǒng);或者將智能體部署到應(yīng)用程序中,讓用戶通過語音與智能體互動。用戶不僅可以與智能體進行語音交流,還可以上傳圖片并要求智能體分析并回答有關(guān)該圖片的問題。
4. 定制自主智能體功能進入預(yù)覽階段
開發(fā)者可以創(chuàng)建無需人工提示的智能體,它們檢測到特定事件后可隨時做出響應(yīng),并觸發(fā)一系列業(yè)務(wù)操作。
5. Microsoft 365 Agents SDK進入預(yù)覽階段
有了SDK,開發(fā)者如今可以通過代碼擴展智能體的功能,構(gòu)建企業(yè)級、可擴展的多渠道智能體。
知識管理
Copilot Studio正在擴展知識管理和RAG(檢索增強生成)能力。該功能已進入預(yù)覽階段。
平臺引入了連接器功能,可以接入全新的知識源。開發(fā)者現(xiàn)在可以讓智能體從多個第三方數(shù)據(jù)源(如Salesforce、ServiceNow和Zendesk)獲取實時知識。Copilot Studio僅對這些表格的元數(shù)據(jù)進行語義索引,無需數(shù)據(jù)移動,就能幫助回答來自這些第三方源的復(fù)雜問題。
你還可以將某些數(shù)據(jù)來源標記為「權(quán)威」,以確保智能體優(yōu)先使用這些數(shù)據(jù),提供可靠的相應(yīng)。
除了接入新知識,Copilot Studio還使用了最新的GPT模型并優(yōu)化了RAG策略,以獲取高質(zhì)量答案。
通過高級知識調(diào)優(yōu)功能,開發(fā)者可以更好地控制數(shù)據(jù)源。對于每個問題,開發(fā)者現(xiàn)在可以清楚地看到哪些數(shù)據(jù)源被使用、哪些還尚未解答。知識調(diào)優(yōu)功能還會建議從組織中添加額外知識,并提供指導性方法來篩選和優(yōu)先考慮知識源。
智能體上線之前,開發(fā)者還可以進行測試,查看其響應(yīng)的準確性如何。
此外,平臺還提供詳盡的分析數(shù)據(jù),如數(shù)據(jù)源使用率等,以了解是否需要調(diào)整某些數(shù)據(jù)源。
Copilot Studio的知識管理功能還整合了Azure AI Foundry,以支持更復(fù)雜、更定制化的場景。
開發(fā)者通常會在Azure AI中存儲大量數(shù)據(jù)。
現(xiàn)在可以直接將這些數(shù)據(jù)作為知識源用于Copilot Studio,可以在Azure AI Search中構(gòu)建的向量化索引上執(zhí)行搜索操作,以訪問非結(jié)構(gòu)化數(shù)據(jù)。
開發(fā)者還可以將這些數(shù)據(jù)與定制的RAG策略結(jié)合到Copilot Studio中,以獲得更準確的結(jié)果。通過連接所有數(shù)據(jù)源,組織可以確保智能體更加貼合其業(yè)務(wù)數(shù)據(jù),提供具體且高質(zhì)量的響應(yīng)。
這還不是全部。Copilot Studio中還引入了更高級的Azure AI功能。開發(fā)者很快就能訪問Azure AI模型目錄中的模型,其中包括超過1800個模型。他們還可以直接在Copilot Studio中訪問并調(diào)用自己定制微調(diào)的模型。
全新分析
通過全新的分析功能,開發(fā)者能夠了解其生成式AI系統(tǒng)的運行情況。
除了前面提到的知識庫數(shù)據(jù)源的分析外,用來衡量系統(tǒng)或業(yè)務(wù)整體表現(xiàn)的頂層指標也得到了全面升級。這些指標將更完善、更高效,并能夠展示長期趨勢。
開發(fā)者可以根據(jù)特定結(jié)果篩選圖表,以了解關(guān)鍵績效指標(KPI)和客戶滿意度。
語音和圖像
Copilot Studio現(xiàn)已加入語音功能。企業(yè)可以將智能體集成到交互式語音應(yīng)答系統(tǒng)(IVR)中,讓原本僵化的語音菜單變身為靈活的AI助手。
只需指定知識來源,智能IVR即可在電話中輕松應(yīng)對大量復(fù)雜問題,顯著減少問題升級至人工處理的情況。這些智能語音助手還能識別語音、處理用戶打斷、檢測靜音、并進行重新提示。
不僅限于IVR系統(tǒng),支持語音的智能體還能嵌入應(yīng)用程序、獨立終端、禮賓系統(tǒng)等場景。
例如,一家酒店的應(yīng)用程序可以使用一個接入相應(yīng)知識庫的Copilot智能體,充當客房內(nèi)的專屬禮賓服務(wù),為賓客提供貼心幫助。
除了語音功能,Copilot Studio還新增了圖像處理能力。
用戶現(xiàn)在可以上傳圖片,并向智能體提問。例如:「為什么我這個月的賬單更高?」
此外,圖像上傳還能用來錄入數(shù)據(jù)。銷售人員可以對智能體說:「把這些手寫筆記添加到CRM系統(tǒng)中?!?/span>
自主智能體
定制自主智能體的功能早在10月底宣布,如今終于開啟預(yù)覽。
自主智能體可以獨立代表用戶、團隊或組織,自動化處理那些復(fù)雜又耗時的業(yè)務(wù)任務(wù)。
開發(fā)者可以設(shè)計智能體檢測特定事件(例如新郵件到達),這些智能體可隨時做出響應(yīng),并利用生成式AI觸發(fā)一系列操作,自動化復(fù)雜的業(yè)務(wù)任務(wù)。
例如,智能體可以一口氣執(zhí)行以下操作:
1. 評估郵件意圖
2. 查找發(fā)件人詳細信息及賬戶信息
3. 查看以往通信記錄
4. 檢查庫存情況
5. 回復(fù)發(fā)件人并詢問其偏好
6. 采取適當行動關(guān)閉工單
開發(fā)者既可以從零開始構(gòu)建自主智能體,也可以在Copilot Studio中配置預(yù)構(gòu)建好的特定功能的智能體。
智能體SDK
Microsoft 365 Agents SDK目前已經(jīng)提供預(yù)覽版。
這意味著Copilot Studio的開發(fā)者如今可以通過代碼擴展智能體的功能,構(gòu)建企業(yè)級、可擴展的多渠道智能體。
開發(fā)者擁有完全的靈活性,可以連接任意AI服務(wù),包括Azure AI Foundry、Semantic Kernel、Copilot Studio等。
使用SDK構(gòu)建的智能體還可以部署到多種渠道,如Microsoft 365 Copilot、Microsoft Teams、Web,以及十多個第三方消息平臺。
兩款定制芯片,專為數(shù)據(jù)處理和安全打造
大會上,微軟推出了兩款專為數(shù)據(jù)中心基礎(chǔ)設(shè)計設(shè)計的芯片:Azure Integrated HSM和Azure Boost DPU。
Azure Boost DPU是微軟的第一個數(shù)據(jù)處理單元,專為以數(shù)據(jù)為中心的高效率和低功耗工作負載而設(shè)計。
微軟預(yù)計未來配備DPU的Azure服務(wù)器,將以現(xiàn)有服務(wù)器4倍性能運行,但同時也要消耗3倍的電力。
這款芯片的設(shè)計,可能起源于微軟去年12月,以1.9億美金收購的DPU制造商Funcible。
另一款芯片是專為安全而打造的Azure Integrated HSM。
它可以將前簽名鑰和加密密鑰放在一個安全模塊中,而不會影響性能,或增加延遲。
它是繼Pluton之后,微軟第二顆安全芯片。Pluton是一款內(nèi)置于英特爾、AMD和高通處理器中的以消費者為中心的芯片。
從明年開始,Azure Integrated HSM將配備在微軟數(shù)據(jù)中心的每一臺服務(wù)器上,以增加Azure硬件對機密和通用工作負載的保護。
迷你PC僅需2500元,但不能運行本地應(yīng)用
在硬件方面,微軟發(fā)布了一款自稱比Mac mini還要小的PC——Windows 365 Link,售價349美元(2526元)。
這款mini PC計劃在明年推出,并搭配Windows 365云服務(wù)使用。
也就是說,它將不會在設(shè)備上運行任何本地內(nèi)容。
Link被設(shè)計成一款緊湊、無風扇、易于使用的云電腦,可連接顯示器和外部設(shè)備。
通過Windows 365服務(wù),企業(yè)可以讓員工使用存在于云端的虛擬機,這些虛擬機可以安全地串流到多個設(shè)備上。
它可以在幾秒內(nèi)啟動,能夠即時從睡眠狀態(tài)喚醒,并使用自己的芯片來處理Microsoft Teams或思科Webex的視頻。
它有兩個USB-A 3.2端口和一個USB-C 3.2端口,以及一個DisplayPort和HDMI端口和以太網(wǎng)連接。在前面,有一個USB-A 3.2端口,還包括Wi-Fi 6 E和藍牙5.3無線連接。