從 AI 導入到 Agent 治理

微軟以完整框架、工具與方法論,協助企業打造負責任、可信任的 AI

當前企業對 AI 的導入有兩大明確的關注方向,一是如何讓 AI 變得更強,二是如何確保 AI 可控。而在企業追求 AI 生產力之際,信任更是不可或缺的前提,隨著 Agent 的興起與普及,負責任且更值得信任的 AI 就成為重中之重。

企業要安心將權限與各種大小決策交付給 AI Agent 的前提,在於具備足夠的信任技術,邊界、檢查點與稽核則是最為必需的三大基礎要件,獨立機構 CNCF(Cloud Native Computing Foundation)提出的 OPA(Open Policy Agent)對此已有相關規範。

「邊界」用以明確界定 Agent 可以做的事,也就是劃定框架。邊界是由 Agent OS、Agent Mesh、Agent Runtime、Agent SRE 四個核心所組成的系統架構,涵蓋了 Agent Stack 的各層架構如何做整合、Agent 的大腦源於哪個模型、如何信任互動的其他 Agent、如何確保可靠性等事項。

由此延伸的實際措施包括身分驗證、權限分級(一般使用者、訪客或其他分類)、各個執行動作的可稽核性和記錄等,都是核心模組必須包含的功能,目前包括 Microsoft Agent Governance Toolkit 在內的多種開源的開發框架皆提供支援。

「檢查點」著重在 Agent 與其他 Agent、資料、應用程式及人的互動時,界定各個檢查點的風險高低,找出需要由人介入或簽核的環節,除了受監管的高風險產業,還包括高風險的業務場景。

開源框架設定了八個檢查點,透過「Policy as Code」的作法涵蓋 Agent 從啟動到結束運作的完整過程,每個檢查點都提供放行、警示放行、拒絕、升級呈核等不同應對方式。例如微軟的 Agent Control Specification,可將 Agent 行為的核准與權限落實成文件,並轉化為確實的系統邊界。

「稽核」不僅確保事後可以追查,還要防止竄改,讓 Agent 的一舉一動都必須透明和具備可檢視性。相較於以往檢查應用程式弱點,可透過訊息的回覆來確認無誤,但生成式 AI 的幻覺問題,可能導致雖然回應正常但產出結果有誤,遵循 Open Telemetry 機制建立證據鏈,就能將每一次模型呼叫、工具呼叫都變成可回溯、可評測的數據軌跡。

Agent 的可控不只在管理面,成本面的可控更是近來備受關注的課題,就實務運作而言,從開發、應用,甚或資安,對於模型的需求本就各不相同,以排名為依據或只使用同一個模型,不僅難以發揮最佳效益,更可能造成成本虛增。因此,微軟從 GitHub 到 Microsoft Foundry 皆提供多模型選擇,以多元、開放、異質的模型平台,讓企業為每一種工作負載選對智慧。

簡言之,模型的選擇取決於工作負載的適合度。在選擇之前應該先定義任務契約,也就是根據特定任務,模型需要做什麼、成功標準是什麼、必須遵守的限制,以及不可接受的失敗模式。舉例來說,分類、路由或高流量對話,適合使用小型、低延遲的模型;影像、語音或實體 AI,則可選擇特定模態模型。即便不確定該如何選擇模型也沒關係。Microsoft Foundry 提供 Model Router 能力,可根據任務類型、回應品質、延遲需求與成本效益等因素,智慧地將請求路由至最適合的模型。讓開發團隊不必在眾多模型之間反覆評估與切換,也能獲得兼顧品質、效能與成本的最佳結果。

目前,Microsoft Foundry 已集結 40 多家供應商提供超過 11,000 個模型,以一站式平台讓企業快速搜尋、評估及部署最合適的 AI 模型。可選擇的模型來源之一是已納入 Azure 服務的模型,由微軟提供支援並高度整合於 Azure 服務及基礎架構,具備企業級的擴充性、可靠度與安全性。

另一個可選擇的模型來源則是由可信任的第三方、合作夥伴與社群提供,能更聚焦於特定情境或產業的專業應用,並可快速取得最新版本的模型或技術。至於運作方式,則有託管運算或無伺服器部署,無論哪種作法都可結合 Azure 既有的安全機制與相關的資安服務,例如 Microsoft Entra 認證、Azure AI 內容安全過濾器。

有效的模型選擇取決於四個面向,也就是能力、安全性、延遲與成本。對此,Microsoft Foundry 進一步在系統層級,為開發者提供橫跨品質、成本與延遲的最佳化技術,例如:智慧路由可根據複雜度和預算將個別任務送交給正確的模型、批次處理使用非同步作法來處理不需要即時回應的工作負載、快取機制則可避免重複因相同或類似的請求而支付額外費用。

尤其,微軟針對企業所提供的資料僅用於服務提供,不會用於模型訓練,亦不會提供給模型供應商,將模型選擇權交還給企業,由企業依需求自主選擇及部署不同的模型。

微軟從 2016 年就投身於負責任 AI,歷年都有進展與成果,例如:在 2019 年成立負責任 AI 辦公室、2022 年提出第二版的負責任 AI 標準。2022 年也展開對可信任 AI(Trustworthy AI)的關注,根據負責任 AI 的六大原則,提出具體可落實的步驟,涵蓋原則、目標、需求到工具和實踐。

此外,2024 年和 2025 年皆發表微軟負責任 AI 透明度報告,並提出企業 Agent 治理框架和服務,2025 年更順利取得 ISO/IEC 42001:2023 認證。值得一提的是,Microsoft Agent Governance Toolkit 與開源框架可協助開發者以更少的時間、更快速地因應相關法規,包括 2026 年 8 月生效的歐盟 AI 法案透明度義務,以及美國 NIST AI RMF、OWASP Agentic AI Top 10 與 SOC 2。 從開發端、治理端到使用者端,微軟透過 GitHub、Microsoft Foundry、Microsoft 365 Copilot、Teams 全面納入安全機制,以確保 Agent 的可控性。而在日前登場的 Microsoft Build 年度開發者大會裡,已經上線或正在預覽階段的多項服務也持續加強對 Agent 的可觀測性及投資回收的計算。

微軟 Agent 平台,讓企業透過 GitHub 建置、在 Microsoft Foundry 部署與運行,再透過 Microsoft 365 Copilot 與 Teams 交付員工使用,背後皆具備企業所需的智慧與信任基礎。

舉例來說,已經正式上線的 Agent Governance Toolkit 是串連證據鏈的工具。正在預覽階段的 Agent Optimizer 可根據成本、品質等不同需求,對 Agent 進行最佳化,在語境和語意不變的情況下,修正提供給基礎模型的描述,甚至是切換及測試Agent的最佳運作設定。

微軟的每項行動與解決方案,是讓信任成為 AI Agent 內建的機制,以信任為前提,企業才能安心將權力、權限、執行小決策的鑰匙交給 Agent,加速釋放其潛力。當治理讓信任沉澱為底層、多模型讓智慧用在合適的地方,企業便同時握有「智慧(Intelligence)」與「信任(Trust)」兩大基礎 —— 這正是前瞻轉型(Frontier Transformation)的起點:不只是追求更快、更省,而是讓 AI 放大人的企圖心,達到最高期望與成長潛能。當人與 Agent 開始協作,企業便從「導入 AI」晉升為以智慧與信任驅動成長的前瞻企業。

本文轉載自 iThome

中文(台灣)
您的隱私權選擇退出圖示 您的隱私選擇
消費者健康情況隱私權 連絡 Microsoft 隱私權 管理 Cookie 使用規定 商標 有關我們的廣告訊息