This is the Trace Id: 89b3699fbf262c749d31a5591c0f4622
跳到主要內容 Microsoft Defender Microsoft Entra Microsoft Intune Microsoft Purview Microsoft Security Copilot Microsoft Sentinel 檢視所有產品 AI 支援的網路安全性 雲端安全性 資料安全性與治理 身分識別和網路存取權 隱私權與風險管理 AI 的安全性 中小型企業 整合安全性作業 零信任 價格 服務 合作夥伴 為何選擇使用 Microsoft 安全性 網路安全性意識 客戶案例 安全說明資訊 產品試用 受業界認可 Microsoft Security Insider Microsoft 數位防禦報告 安全回應中心 Microsoft 安全性部落格 Microsoft 安全性事件 Microsoft 技術社群 文件 技術內容庫 訓練與認證 Microsoft Cloud 合規性計畫 Microsoft 信任中心 服務信任入口網站 Microsoft 安全未來倡議 商務解決方案中樞 連絡銷售人員 開始免費試用 Microsoft 安全性 Azure Dynamics 365 Microsoft 365 Microsoft Teams Windows 365 Microsoft AI Azure Space 混合實境 Microsoft HoloLens Microsoft Viva 量子運算 教育 汽車 金融服務 政府機構 醫療保健 製造 零售 尋找合作夥伴 成為合作夥伴 合作夥伴網路 Microsoft Marketplace 軟體公司 部落格 Microsoft Advertising 開發人員中心 文件 活動 授權 Microsoft Learn Microsoft 研究 檢視網站地圖

什麼是 AI 資料安全性?

了解 AI 資料安全性如何保護敏感性資料,並在整個生命週期中保護 AI,以維持合規性、降低風險,並確保值得信賴的 AI 結果。
2024 年 Microsoft 數位防禦報告: 網路安全性的基礎和新疆界

AI 資料安全性涵蓋保護用來訓練 AI 系統的資料,以及 AI 模型本身的各項措施與做法。這些保護措施有助於組織維持信任、遵循法規,並降低高昂外洩事件的風險。

關鍵重點

  • AI 資料安全性和 AI 模型安全性可保護資料以及整個 AI 生命週期。
  • 傳統安全性措施不足以因應 AI 特有的風險,例如資料投毒和模型竊取。
  • 強大的 AI 安全性策略包括加密、存取控制、持續監控和對抗防禦。
  • 聯盟學習和差異隱私權等新的隱私權保護技術,正塑造 AI 安全性的未來。
  • 遵循不斷演進的法規,對負責任地採用 AI 至關重要。
  • 選擇合適的 AI 資料安全性解決方案,可降低外洩成本、支援合規性,並加速安全的 AI 部署。

什麼是 AI 資料安全性?

AI 資料安全性是保護 AI 模型以及支援 AI 系統的資料的作法。它也包括保護 AI 供應鏈,例如第三方資料集、預先訓練模型和開放原始碼元件,以防止引入弱點。維護模型和資料譜系,可確保清楚追蹤 AI 系統如何建置、訓練和更新。

AI 資料安全性有雙重重點:

  • 保護敏感性資料,例如個人資訊、智慧財產權,以及專屬資料集。
  • 保護 AI 模型,避免遭受篡改、網路攻擊和模型竊取等威脅。

隨著各產業加速採用 AI,這些保護措施變得至關重要。AI 系統通常依賴大量且多元的資料集,如果管理不當,可能會引入新的弱點。與著重於已儲存或傳輸中資料的傳統資料安全性不同,AI 資料安全性延伸到整個 AI 生命週期,從資料收集和模型訓練,一直到部署和監控。加密、存取控制資料外洩防護 等技術,構成 AI 模型安全性的基礎,並有助於在整個 AI 生命週期中保護敏感性資訊。

對企業主管和安全性專業人員而言,了解 AI 資料安全性對於降低風險、維持合規性,以及確保 AI 系統按預期運作且不會讓組織暴露於新的 受攻擊面,都至關重要。

為什麼 AI 資料安全性很重要

AI 資料安全性可解決可能影響業務營運和組織信任的風險。當您將 AI 整合到關鍵工作流程時,所涉及的敏感性資料量會大幅增加,包括客戶資訊、財務記錄和專屬研究。如果這些資料遭到入侵,後果可能十分嚴重。

AI 資料安全性對於以下方面至關重要:

  • 降低業務風險資料外洩可能會導致監管處罰、信譽損害和財務損失。
  • 降低安全性風險AI 模型可能會遭到 網路攻擊 操縱,例如資料投毒或惡意使用者輸入,進而導致不正確的輸出或帶有偏見的決策。
  • 保持合規性。《一般資料保護規定 (GDPR)》 以及新興的 AI 特定架構等法規,要求組織保護資料並確保負責任的 AI 作法。
  • 維持營運完整性遭入侵的模型可能會中斷服務、降低準確性,並削弱對 AI 驅動決策的信任。

生成式 AI 在醫療保健、金融和製造等產業的快速採用,加劇了風險。如果缺乏強健的安全性措施,您的組織可能會面臨傳統安全性架構原本並未設計來應對的弱點。

AI 系統也容易受到提示注入或惡意使用者輸入等威脅,這些威脅可能操縱輸出或洩露敏感性資訊。

AI 與資料安全性的主要風險

AI 系統帶來了一系列超越傳統資料保護的安全性挑戰。基礎資料和依賴該資料的 AI 模型都存在弱點,因而產生新的受攻擊面。

主要風險包括:

  • 資料投毒惡意行為者會將惡意或誤導性資料插入訓練資料集,使模型學到錯誤模式,最終導致有偏差或有害的輸出。例如,在詐欺偵測系統中,遭投毒的資料集可能讓詐欺交易繞過偵測。
  • 網路攻擊這些攻擊包含設計用來混淆 AI 模型的輸入。常見的例子是以細微方式修改影像,讓電腦視覺模型將其誤判。這類攻擊可能在不觸發警示的情況下繞過安全性系統。
  • 模型逆向在這種攻擊中,攻擊者會利用模型輸出來推斷訓練資料中的敏感性詳細資料。例如,如果醫療保健 AI 模型遭到逆向推斷技術利用,可能會在無意間洩露病患資訊。
  • 模型竊取和智慧財產損失AI 模型代表研究與開發上的重大投資。竊取或複製這些模型的威脅行為者,可能削弱競爭優勢,並將其用於惡意目的,例如製作深偽內容或繞過安全性系統。

為什麼這些風險不同

與著重於已儲存或傳輸中資料的傳統安全性威脅不同,針對 AI 系統的攻擊會利用學習過程和模型行為。單一遭入侵的資料集可能在一段時間內悄悄降低模型效能,而對抗性輸入則可能讓自動駕駛汽車或詐欺偵測平台等關鍵系統即時失效。

AI 系統也引入新的受攻擊面,包括模型增益集、資料前處理管線和提示介面,而這些都不在傳統安全性模型的考量範圍內。

AI 系統遭入侵可能導致:

  • 偏差放大遭投毒或遭操縱的資料可能引入或加劇偏差,進而導致合規性與倫理問題。
  • 法規風險暴露涉及 AI 系統的外洩事件可能觸發資料保護法律和新興 AI 法規下的罰則。
  • 營運中斷遭入侵的模型可能導致錯誤決策、服務中斷和客戶信任流失。

AI 資料安全性的運作方式

與傳統資料安全性相比,AI 資料安全性所面對的威脅範圍更廣,也更複雜。雖然兩者都旨在保護敏感性資訊,但其範圍和方法各不相同。

傳統資料安全性

傳統 資料安全性 著重於在儲存與傳輸期間保護資料。核心措施包括加密、存取控制和 網路安全性,以防止未經授權的存取或外洩。主要目標是確保靜態資料或交易資料的機密性、完整性與可用性。

AI 資料安全性有何不同

AI 安全性 的範疇不只保護儲存或傳輸中的資料。它也會保護 訓練資料集AI 模型學習流程,這些都是智慧系統的核心。這也包括防範資料投毒、網路攻擊與模型竊取等威脅,這些在傳統系統中並不存在。由於模型會隨時間演進,AI 安全性也需要持續監控與生命週期保護。

強化 AI 資料安全性策略的核心元件包括:

1. 資料保護措施,這一點很重要,因為 AI 系統依賴大量敏感性資訊。加密、權杖化和嚴格的存取控制可降低未經授權的存取或資料外洩風險。這些措施可確保即使系統遭到入侵,資料仍然無法讀取且保持安全,並支援隱私法規遵循。

  • 加密與權杖化: 將靜態和傳輸中的資料都加密,以防止未經授權的存取。權杖化會以非敏感的對應值取代敏感性元素,降低暴露風險。
  • 存取控制與身分管理: 透過驗證每位使用者來套用零信任原則,並強制使用強式 驗證,以限制可檢視或修改訓練與推論資料的人員。
  • 資料最小化: 只蒐集並保留模型效能所需的資料,以縮小受攻擊面。

2. 模型安全性做法。AI 模型本身就是有價值的資產,也是潛在的攻擊目標。透過驗證、對抗性韌性與受控存取來保護模型,可防止篡改、竊取與濫用。這些做法可保護智慧財產,並維持模型輸出的完整性;這對金融或醫療保健等敏感領域的決策至關重要主要的模型安全性做法包括:

  • 訓練資料驗證。在訓練開始之前,使用完整性檢查和異常偵測來識別有害或損壞的資料集。
  • 推斷管線監控。部署即時監控以識別可能表示資料投毒、對抗性活動或模型降級的行為轉移。
  • 模型強化。實作如對抗性訓練的技術,讓模型更具操作彈性

3. 涵蓋整個生命週期的安全性。AI 安全性不能只限於部署階段;它必須涵蓋整個生命週期。從訓練到退役,每個階段都會帶來不同的風險,例如訓練期間遭投毒的資料集,或停用後殘留資料的暴露。涵蓋整個生命週期可確保及早處理弱點,降低長期暴露與營運風險。保護技術會隨階段而不同。

  • 訓練階段。套用隱私權保護技術,例如 差異隱私權,透過加入統計雜訊來保護個別資料點,以及 聯盟學習,在不集中原始資料的情況下訓練模型。
  • 部署階段。使用執行階段監控、異常偵測和記錄來追蹤模型行為,並偵測偏離或竄改。
  • 淘汰階段。安全地解除處理模型和相關聯的資料集,以避免資料暴露或未經授權的重複使用。

4. 自適應且持續的監控。AI 系統會隨著從新資料中學習而演進,因此安全性不能為靜態。持續監控搭配自動化警示與定期稽核,可確保及時處理新出現的威脅。

5. 遵循負責任 AI 原則。安全性措施應整合公平性、透明性與問責性。這包括記錄模型沿革、維持可解釋性,並確保符合 GDPR、 歐盟 AI 法案和 NIST AI 風險管理架構等法規。

實務範例

金融機構若部署 AI 詐騙偵測模型,可以將所有交易資料加密、驗證訓練資料集是否有異常、監控推論管線是否有對抗性輸入,並採用聯盟學習來保護客戶隱私。這些綜合措施可降低 資料外洩、模型篡改與法規違反的風險。

AI 與資料保護的指導

強健的 AI 資料安全性策略需要結合技術防護、治理架構與作業紀律。這些最佳做法有助於降低弱點、維持法規遵循,並確保 AI 支援決策的完整性。

建立完善的資料治理

資料治理 是 AI 安全性的基礎。請為資料蒐集、儲存與使用定義清楚的原則,包括驗證資料集來源、確認其符合倫理來源,以及檢查其準確性與完整性。定期稽核有助於偵測異常、防止偏差,並維持對隱私權法規的合規性。驗證資料集的來源,確保其取得方式符合倫理,並確認其準確性與完整性。定期稽核有助於偵測異常、防止偏差,並維持隱私權法規遵循。

套用保護隱私權的技術

AI 系統常會處理敏感性資訊,因此隱私權是一項關鍵考量。差異隱私權等技術會加入統計雜訊來保護個別資料點,而聯盟學習則可在不集中原始資料的情況下進行模型訓練。同態加密可讓運算在加密資料上執行,降低處理期間的暴露風險。

確保 AI 供應鏈安全

AI 模型常仰賴第三方資料集、預先訓練模型和開放原始碼元件。這些項目各自都可能帶來潛在弱點。驗證所有外部資產、維護已核准元件的受信任存放庫,並實作完整性檢查,以防止竄改或惡意程式碼插入。

實作穩健的存取控制

限制對敏感性資料和模型的存取至關重要。角色型存取控制可確保只有獲授權人員才能與關鍵系統互動。多重要素驗證可增加額外的安全性層級,降低認證型攻擊的風險。

持續監控與稽核

AI 系統具有動態性,威脅也會隨時間演變。持續監控可即時偵測異常、對抗性輸入與模型漂移。定期安全性稽核與滲透測試有助於在弱點被利用前先行識別。記錄和警示機制可提供系統行為的可見性,並支援事件回應。

將安全性整合到 AI 生命週期中

安全性不應是事後補充。在每個階段都嵌入安全性檢查,從資料準備和模型訓練到部署與停用,都能確保主動處理弱點。這包括驗證資料集、保護推斷管線的安全,以及安全地淘汰模型,以防止殘留資料外洩。

符合相關法規與道德標準

遵循資料保護法規與新興 AI 法規為絕對必要。請記錄組織的模型決策、維持透明度,並實作可解釋性功能,以支援問責性。將安全性與負責任 AI 原則保持一致,可建立信任並降低法律與商譽風險。

AI 與資料安全性的未來

隨著組織採用更先進的技術並面對日益複雜的威脅,AI 資料安全性技術也在持續演進以跟上需求。有幾項趨勢正在形塑這個領域的未來,包括:

  • 保護隱私權的 AI 技術。聯盟學習、差異隱私權和同態加密等方法,將會更廣泛地被採用。這些方法可讓您在不集中敏感性資料的情況下訓練模型,降低暴露風險。
  • AI 支援的威脅偵測。我們將看到 適用於網路安全性的 AI 更廣泛採用,即時識別異常、對抗性輸入和模型漂移,協助組織更快回應新興威脅。
  • 零信任原則。零信任架構 假設網路內沒有任何隱含信任,將延伸到 AI 環境,對使用者、裝置和模型進行持續驗證。這包括在模型存取模式、資料流程和推斷作業中強制實作零信任,以確保所有 AI 互動都能持續驗證。
  • 法規一致性與合規性自動化。符合不斷演進的 法規合規性 標準,對於負責任的 AI 部署至關重要。隨著歐盟 AI 法案和 NIST AI 風險管理架構等法規日益成熟,組織將採用自動化合規性工具,簡化 AI 系統的文件記錄、稽核與報告作業。
  • 確保 AI 供應鏈安全。隨著第三方資料集和預先訓練模型的使用增加,保護 AI 供應鏈將成為優先事項。驗證架構與完整性檢查有助於防止惡意元件被引入 AI 系統。
  • 抗量子安全性措施。隨著量子運算持續進展,加密方法也需要隨之演進。後量子密碼學將在保護 AI 資料和模型、抵禦未來運算威脅方面發揮作用。

資料安全性中的 AI 解決方案

選取合適的 AI 資料安全性解決方案,對於降低風險並支援創新至關重要。合適的方法應與組織的安全性態勢、法規要求和營運目標保持一致。完整的解決方案不僅要處理資料保護,也要涵蓋模型完整性、存取控制和生命週期管理,確保 AI 採用能同時支援營運目標與合規性標準。健全的治理架構可確保 資料合規性,同時支援創新與信任。

將安全性整合到 AI 生命週期中,有助於降低外洩風險、維持法規合規性,並讓 AI 採用更值得信任。

正確的 AI 和 資料保護 解決方案可強化防護,並加速負責任的採用。完整的解決方案應能協助:

  • 透過在各個環境中維持對模型、資料和使用情況的可見度與控制,來 管理 AI 雜亂擴展
  • 透過強化防護,在訓練、部署和推斷期間保護敏感性資訊,從而 防止資料外洩
  • 透過持續監控和自適應的安全性措施來 防禦威脅,以因應不斷演變的攻擊手法。
  • 透過在整個生命週期中支援合規性、透明度與負責任 AI 實務,來 協助 AI 治理

若要了解這些功能如何共同運作,請探索 適用於 AI 的 Microsoft 安全性,以取得詳細指導和解決方案。

常見問題集

  • 資料安全性取決於 AI 系統的設計與管理方式。如果沒有適當的防護,AI 可能會帶來新的風險,例如資料外洩或未經授權的存取。包括加密和存取控制在內的強大安全性措施,對維持防護至關重要。
  • AI 資料安全性是指用來保護 AI 系統中資料、模型和流程的做法與技術。它可因應整個 AI 生命週期中的資料投毒、模型竊取和合規性風險等威脅。
  • AI 中的資料保護涉及在收集、訓練和部署期間保護敏感性資訊。這包括加密、匿名化和保護隱私權的技術,以防止個人和專有資料遭到濫用或外洩。
  • AI 可用於資料安全性,以偵測異常、預測威脅並自動化回應。機器學習模型會分析大型資料集中的模式,以識別潛在的外洩並改善整體安全性態勢。
  • Microsoft 提供整合式解決方案來保護 AI 系統,包括身分識別管理、資料治理和威脅防護工具。這些解決方案可協助組織保護敏感性資料、符合合規性要求,並以負責任的方式部署 AI。

關注 Microsoft 安全性