SanitizeUserPrompt 政策

本頁內容適用於 ApigeeApigee Hybrid

查看 Apigee Edge 說明文件。

總覽

「SanitizeUserPrompt」政策會清除傳送至生成式 AI 模型的使用者提示,保護 AI 應用程式免於有害內容的侵害。這項政策會使用 Model Armor 評估使用者提示是否含有有害內容,透過 Apigee 為 AI 工作負載提供原生保護。Model Armor 是一項 Google Cloud 服務,提供 AI 安全防護措施,可降低與大型語言模型 (LLM) 相關的風險。

這項政策會與 SanitizeModelResponse 政策搭配使用。

這項政策是可擴充政策,使用這項政策可能會產生費用或影響用量,具體情況取決於您的 Apigee 授權。如要瞭解政策類型和使用方式的影響,請參閱「政策類型」。

事前準備

使用 SanitizeUserPrompt 政策前,請先完成下列工作:

  • 建立 Model Armor 範本。您必須先完成這個步驟,才能建立 SanitizeUserPrompt 政策。
  • 設定 Model Armor 服務的 API 端點。
  • 建立 SanitizeModelResponse 政策。您必須先完成這項工作,才能部署 SanitizeUserPrompt 政策。

必要的角色

如要取得套用及使用 SanitizeUserPrompt 政策所需的權限,請要求管理員在您用來部署 Apigee Proxy 的服務帳戶中,授予下列 IAM 角色:

如要進一步瞭解如何授予角色,請參閱「管理專案、資料夾和機構的存取權」。

您或許還可透過自訂角色或其他預先定義的角色取得必要權限。

啟用 API

Enable the Model Armor API.

Enable the API

<SanitizeUserPrompt> 元素

定義 SanitizeUserPrompt 政策。

預設值 請參閱下方的「預設政策」分頁
必填與否 必填
類型 複雜物件
父項元素 不適用
子元素 <DisplayName>
<IgnoreUnresolvedVariables>
<TemplateName>
<UserPromptSource>

<SanitizeUserPrompt> 元素使用下列語法:

語法

<SanitizeUserPrompt async="false" continueOnError="false" enabled="true" name="sanitize-text">
  <IgnoreUnresolvedVariables>true</IgnoreUnresolvedVariables>
  <DisplayName>Sanitize-Text-sample</DisplayName>
  <ModelArmor>
    <TemplateName>projects/{project}/locations/{location}/templates/{template-name}</TemplateName>
  </ModelArmor>
  <UserPromptSource>{jsonPath('$.contents[-1].parts[-1].text',request.content,true)}</UserPromptSource>
</SanitizeUserPrompt>

預設政策

下列範例說明在 Apigee UI 中將 SanitizeUserPrompt 政策新增至要求流程時的預設設定:

<SanitizeUserPrompt async="false" continueOnError="false" enabled="true" name="sanitize-text">
  <IgnoreUnresolvedVariables>true</IgnoreUnresolvedVariables>
  <DisplayName>Sanitize-Text-sample</DisplayName>
  <ModelArmor>
    <TemplateName>projects/{project}/locations/{location}/templates/{template-name}</TemplateName>
  </ModelArmor>
  <UserPromptSource>{jsonPath('$.contents[-1].parts[-1].text',request.content,true)}</UserPromptSource>
</SanitizeUserPrompt>

使用 Apigee UI 插入新的 SanitizeUserPrompt 政策時,範本會包含所有可能作業的存根。請參閱下文,瞭解必要元素。

這個元素包含下列所有政策都適用的屬性:

屬性 預設 是否必要? 說明
name 不適用 必要

政策的內部名稱。name 屬性的值可以包含英文字母、數字、空格、連字號、底線和句號。這個值不得超過 255 個半形字元。

您可以選擇使用 <DisplayName> 元素,在管理 UI 代理程式編輯器中為政策加上不同、自然語言的名稱。

continueOnError false 選用 將其設為 false,即可在政策失敗時傳回錯誤。這是大多數政策的預期行為。將其設為 true,即使政策失敗,流程執行作業仍會繼續進行。另請參閱:
enabled 選用 設為 true 即可強制執行政策。設為 false 即可關閉政策。即使政策仍附加至流程,系統也不會強制執行這項政策。
async   false 已淘汰 此屬性已淘汰。

下表提供 <SanitizeUserPrompt> 子元素的高階說明:

子元素 是否必要 說明
<DisplayName> 選用 政策名稱。

<IgnoreUnresolvedVariables> 選用 指定如果用於範本名稱或 Model Armor 酬載的變數未解析,是否停止處理。
<ModelArmor> 必填 包含指定 Model Armor 範本所需的資訊。
<UserPromptSource> 選用 要擷取使用者提示文字的酬載位置。系統僅支援字串文字值。

這個欄位支援 Apigee 訊息範本語法,包括使用 變數JSON 路徑函式

例如:

{jsonpath('$.input.prompt.text',request.content,false)}

範例

本節提供使用 <SanitizeUserPrompt> 的範例。

本範例使用模型偵測和提示擷取的所有預設值:

<SanitizeUserPrompt async="false" continueOnError="false" enabled="true" name="sanitize-text">
  <IgnoreUnresolvedVariables>true</IgnoreUnresolvedVariables>
  <DisplayName>Sanitize-Text-sample</DisplayName>
  <ModelArmor>
    <TemplateName>projects/{project}/locations/{location}/templates/{template-name}</TemplateName>
  </ModelArmor>
</SanitizeUserPrompt>

子元素參照

本節說明 <SanitizeUserPrompt> 的子元素。

<DisplayName>

除了 name 屬性之外,您也可以在管理 UI 代理程式編輯器中使用其他更自然的名稱標記政策。

<DisplayName> 元素適用於所有政策。

預設值 不適用
是否必要? (非必要) 如果省略 <DisplayName>,系統會使用政策的 name 屬性值。
類型 字串
上層元素 <PolicyElement>
子元素

<DisplayName> 元素使用以下語法:

語法

<PolicyElement>
  <DisplayName>POLICY_DISPLAY_NAME</DisplayName>
  ...
</PolicyElement>

範例

<PolicyElement>
  <DisplayName>My Validation Policy</DisplayName>
</PolicyElement>

<DisplayName> 元素沒有屬性或子項元素。

<IgnoreUnresolvedVariables>

判斷變數未解析時是否停止處理。設為 true,即可忽略未解析的變數並繼續處理。

預設值
必填與否 選用
類型 布林值
父項元素 <SanitizeUserPrompt>
子元素

<ModelArmor>

包含指定 Model Armor 範本所需的資訊。

預設值 不適用
必填與否 必填
類型 字串
父項元素
子元素 <TemplateName>

<ModelArmor> 元素使用下列語法:

語法

<ModelArmor>
  <TemplateName>projects/{project}/locations/{location}/templates/{template-name}</TemplateName>
</ModelArmor>

範例

本例使用 Apigee 流程變數填入必要資訊。

<ModelArmor>
  <TemplateName>projects/{organization.name}/locations/{system.region.name}/templates/{id}</TemplateName>
</ModelArmor>

下表提供 <ModelArmor> 子元素的高階說明。

子元素 是否必要 說明
<TemplateName> 必填 字串

用來清除使用者提示的 Model Armor 範本。

您可以使用下列 Apigee 流程變數,將這個值設為範本:

projects/{organization.name}/locations/{system.region.name}/templates/{id}

<UserPromptSource>

要擷取使用者提示文字的酬載位置。這個欄位支援 Apigee 訊息範本語法,包括使用 變數JSON 路徑函式。例如:

{jsonpath('$.input.prompt.text',request.content,false)}
預設值 {jsonPath($.contents[-1].parts[-1].text,request.content,true)}
必填與否 選用
類型 字串
父項元素 <SanitizeUserPrompt>
子元素

流程變數

您可以根據 HTTP 標頭或訊息內容,或流程中可用的內容,使用流程變數設定政策和流程的動態執行階段行為。如要進一步瞭解流程變數,請參閱流程變數參考資料

政策可在執行期間設定這些唯讀變數。

變數名稱 說明
SanitizeUserPrompt.POLICY_NAME.templateUsed 指定要使用的模型裝甲範本。例如: projects/myproject/locations/us-west1/templates/mytemplate
SanitizeUserPrompt.POLICY_NAME.userPrompt 指定用於呼叫 Model Armor 來清除內容的提示內容。
SanitizeUserPrompt.POLICY_NAME.modelResponse 指定用於呼叫 Model Armor 的 LLM 回覆內容,以清除內容。
SanitizeUserPrompt.POLICY_NAME.responseFromModelArmor 指定 Model Armor 的 JSON 回應。
SanitizeUserPrompt.POLICY_NAME.filterMatchState 指出是否符合篩選條件。有效值包括 MATCH_FOUNDNO_MATCH_FOUND
SanitizeUserPrompt.POLICY_NAME.invocationResult 這個欄位會指出叫用結果,無論比對狀態為何。可能具有下列特色:
  • SUCCESS:所有篩選器都已順利執行。
  • 部分:部分篩選器已略過或無法執行。
  • 失敗:所有篩選器都已略過或執行失敗。
SanitizeUserPrompt.POLICY_NAME.raiFilterResult.executionState RAI 篩選器執行結果。有效值包括 EXECUTION_SUCCESSEXECUTION_SKIPPED
SanitizeUserPrompt.POLICY_NAME.raiFilterResult.matchState RAI 篩選器比對狀態。有效值包括 MATCH_FOUNDNO_MATCH_FOUND
SanitizeUserPrompt.POLICY_NAME.sdpFilterResult.inspectResult.executionState Sdp 篩選器檢查結果執行狀態。有效值包括 EXECUTION_SUCCESSEXECUTION_SKIPPED
SanitizeUserPrompt.POLICY_NAME.sdpFilterResult.inspectResult.matchState Sdp 篩選器檢查結果比對狀態。有效值包括 MATCH_FOUNDNO_MATCH_FOUND
SanitizeUserPrompt.POLICY_NAME.sdpFilterResult.deidentifyResult.executionState Sdp filter de identify result execution state. 有效值包括 EXECUTION_SUCCESSEXECUTION_SKIPPED
SanitizeUserPrompt.POLICY_NAME.sdpFilterResult.deidentifyResult.matchState Sdp filter de identify result match state. 有效值包括 MATCH_FOUNDNO_MATCH_FOUND
SanitizeUserPrompt.POLICY_NAME.piAndJailbreakFilterResult.executionState 提示注入和越獄篩選器結果的執行狀態。有效值包括 EXECUTION_SUCCESSEXECUTION_SKIPPED
SanitizeUserPrompt.POLICY_NAME.piAndJailbreakFilterResult.matchState 「提示插入 (PI)」和「越獄」篩選器結果符合狀態。有效值包括 MATCH_FOUNDNO_MATCH_FOUND
SanitizeUserPrompt.POLICY_NAME.csamFilterFilterResult.executionState CSAM 篩選器執行狀態。有效值包括 EXECUTION_SUCCESSEXECUTION_SKIPPED
SanitizeUserPrompt.POLICY_NAME.csamFilterFilterResult.matchState CSAM 篩選器比對狀態。有效值包括 MATCH_FOUNDNO_MATCH_FOUND
SanitizeUserPrompt.POLICY_NAME.maliciousUriFilterResult.executionState 惡意 URI 篩選器的執行狀態。有效值包括 EXECUTION_SUCCESSEXECUTION_SKIPPED
SanitizeUserPrompt.POLICY_NAME.maliciousUriFilterResult.matchState 惡意 URI 篩選器比對狀態。有效值包括 MATCH_FOUNDNO_MATCH_FOUND
SanitizeUserPrompt.POLICY_NAME.sanitizationMetadata.errorCode 如果 Model Armor 回應中含有自訂覆寫的錯誤代碼,則會顯示該代碼。
SanitizeUserPrompt.POLICY_NAME.sanitizationMetadata.errorMessage 如果 Model Armor 回應中含有自訂覆寫的錯誤代碼,則會顯示該代碼。
SanitizeUserPrompt.POLICY_NAME.csamFilterMatched/code> 布林值,表示是否符合 CSAM 篩選器。
SanitizeUserPrompt.POLICY_NAME.maliciousURIs 惡意 URI 篩選器偵測到的惡意 URI 清單 (附加)。
SanitizeUserPrompt.POLICY_NAME.maliciousURIsDetected 布林值,指出惡意 URI 篩選器是否相符。
SanitizeUserPrompt.POLICY_NAME.matchesFound 布林值,表示是否有任何篩選條件相符。
SanitizeUserPrompt.POLICY_NAME.promptInjectionDetected 布林值,指出提示注入篩選器是否相符。
SanitizeUserPrompt.POLICY_NAME.promptInjectionConfidence 提示插入偵測的信賴水準。
SanitizeUserPrompt.POLICY_NAME.raiMatchesFound 指出 RAI 篩選器是否相符的布林值。
SanitizeUserPrompt.POLICY_NAME.requestSentToModelArmor 布林值,指出是否已將要求傳送至 Model Armor。
SanitizeUserPrompt.POLICY_NAME.sanitizeOperation 指定政策執行的作業。有效值包括 SANITIZE_USER_PROMPTSANITIZE_MODEL_RESPONSE

錯誤參考資料

本節說明 Apigee 針對 SanitizeUserPrompt 政策傳回的錯誤代碼和錯誤訊息,以及設定的錯誤變數。如果您要開發用來處理錯誤的錯誤規則,這項資訊就非常重要。詳情請參閱「政策錯誤須知」和「處理錯誤」。

執行階段錯誤

政策執行時可能會發生這些錯誤。

錯誤碼 HTTP 狀態 原因
steps.sanitize.user.prompt.response.FilterMatched 400 如果使用者提示未通過 Model Armor 範本檢查,就會發生這個錯誤。
steps.sanitize.user.prompt.SanitizationResponseParsingFailed 500 如果無法剖析 Model Armor 回應,就會發生這個錯誤。
steps.sanitize.user.prompt.FailedToExtractUserPrompt 500 如果系統無法自動擷取預設值的使用者提示,就會發生這個錯誤。
steps.sanitize.user.prompt.InternalError 500 如果發生內部伺服器錯誤,就會出現這個錯誤。
steps.sanitize.modelarmor.ModelArmorTemplateNameExtractionFailed 500 如果系統無法解析範本名稱,就會發生這個錯誤。
steps.sanitize.modelarmor.AuthenticationFailure 500 如果服務帳戶沒有呼叫 Model Armor API 的權限,就會發生這個錯誤。
steps.sanitize.modelarmor.ModelArmorAPIFailed 500 如果 Model Armor API 擲回錯誤,就會發生這個錯誤。
steps.sanitize.modelarmor.ModelArmorCalloutError 500 如果 Model Armor API 呼叫失敗,就會發生這項錯誤。
steps.sanitize.modelarmor.ServiceUnavailable 500 如果 Model Armor 服務無法使用,就會發生這項錯誤。

部署錯誤

部署含有這項政策的 Proxy 時,可能會發生這些錯誤。

錯誤名稱 原因
The ModelArmor/TemplateName element is required. 如果 <ModelArmor> 中沒有 <TemplateName> 元素,就會發生這種情況。
The TemplateName element value is required. 如果 <TemplateName> 值為空白,就會發生這個錯誤。

錯誤變數

當這項政策在執行階段觸發錯誤時,系統會設定這些變數。詳情請參閱「政策錯誤須知」。

變數 地點 範例
fault.name="FAULT_NAME" FAULT_NAME 是故障名稱,如上方的「執行階段錯誤」表格所示。故障名稱是故障代碼的最後一部分。 fault.name Matches "UnresolvedVariable"
SanitizeUserPrompt.POLICY_NAME.failed POLICY_NAME 是使用者指定的政策名稱,該政策擲回了錯誤。 SanitizeUserPrompt.sanitize-prompt.failed = true

錯誤回應範例

{
  "fault": {
    "faultstring": "SanitizeUserPrompt[sanitize-prompt]: unable to resolve variable [variable_name]",
    "detail": {
      "errorcode": "steps.sanitizeuserprompt.UnresolvedVariable"
    }
  }
}

錯誤規則範例

<FaultRule name="SanitizeUserPrompt Faults">
    <Step>
        <Name>SUP-CustomSetVariableErrorResponse</Name>
        <Condition>(fault.name = "SetVariableFailed")</Condition>
    </Step>
    <Condition>(sanitizeuserprompt.failed = true)</Condition>
</FaultRule>

Model Armor 範本錯誤代碼和錯誤訊息

Model Armor 範本支援覆寫 SanitizeUserPrompt 政策 API 要求擲回的錯誤代碼和錯誤訊息。如果使用者設定覆寫,則 Model Armor 錯誤代碼和錯誤訊息會填入流程變數。

舉例來說,含有 Model Armor 錯誤代碼和訊息的回應可能如下所示:

{
  "sanitizationResult": {
    "filterMatchState": "MATCH_FOUND",
    "filterResults": {...},
    "sanitizationMetadata": {
      "errorCode": "890",
      "errorMessage": "get out"
      },
    "invocationResult": "SUCCESS"
  }
}

結構定義

每個政策類型都由 XML 架構 (.xsd) 定義。如需參考,請前往 GitHub 查看政策架構