ChatGPT的熱烈炒作、廣泛使用和快速蔓延提升了最終用戶對LLM和GenAI的認識，引發(fā)了一波商業(yè)實驗和AI初創(chuàng)企業(yè)的浪潮。2023年4月的Gartner網絡研討會發(fā)現(xiàn)，381名中國參會人員有70%已經或計劃啟動GenAI項目，其中6%已在生產環(huán)境部署了GenAI，26%在試點GenAI，38%處于規(guī)劃階段。

CIO及其安全團隊需要為GenAI的影響做好準備，在以下四個方面采取措施：

• 為構建GenAI應用提供安全保護：AI應用攻擊面不斷擴大，產生了新的潛在風險，需要對現(xiàn)有應用安全實踐進行調整。
• 管理和監(jiān)控使用GenAI的方式：各企業(yè)機構正在探索如何使用嵌入現(xiàn)有應用的GenAI助手，這些應用都有獨特的安全要求，是傳統(tǒng)安全控制措施無法滿足的。
• 利用生成式網絡安全AI進行防御：有效抓住GenAI機遇，從而改善安全和風險管理、 優(yōu)化資源、抵御新興攻擊技術，甚至降低成本。Gartner將生成式網絡安全AI定義為 GenAI技術在網絡安全中的應用。
• 為受到GenAI攻擊做好準備：GenAI工具和技術不斷發(fā)展，各企業(yè)機構必須適應惡意行為者不斷發(fā)展的技術或新的攻擊向量。

圖1對此進行了說明

CIO及其安全團隊不應只是試圖跟上新技術發(fā)展的步伐，也需要規(guī)劃和建立一致而有效的AI安全治理計劃，以應對GenAI采用激增的局面和各類新興場景。

AI安全治理項目應整體覆蓋組織架構、技術和政策。其早期任務之一就是制定所有構建或部署AI的團隊必須遵循的標準，包括安全AI開發(fā)、AI數(shù)據(jù)安全和AI安全應急響應標準。中國CIO和安全團隊應與利益相關者和企業(yè)機構領導者合作，制定五個階段的AI安全治理計劃（見表1）。

表1: AI安全治理項目的五個階段及主要行動