這份入門指南將介紹生成式 AI 的核心技術，並說明這些技術如何相互配合，為聊天機器人和應用程式提供支援。生成式 AI (也稱為 genAI 或 gen AI) 是機器學習 (ML) 領域，主要開發及使用 ML 模型來生成新內容。
生成式 AI 模型通常稱為大型語言模型 (LLM)，因為這類模型規模龐大，且能理解及生成自然語言。不過，視模型訓練所用的資料而定，這些模型可以解讀及生成多種模態的內容，包括文字、圖片、影片和音訊。可處理多種資料模態的模型稱為多模態模型。
Google 提供 Gemini 系列生成式 AI 模型，專為多模態用途而設計，可處理圖片、影片和文字等多種形式的資訊。
生成內容
生成式 AI 模型必須具備下列功能，才能生成實用內容，用於實際應用：
瞭解如何執行新工作：
生成式 AI 模型專為執行一般工作而設計，如果希望模型執行特定用途的專屬工作，就必須能夠自訂模型。在 Vertex AI 上，您可以透過模型微調自訂模型。
存取外部資訊：
生成式 AI 模型是以大量資料訓練而成，不過，這些模型必須能夠存取訓練資料以外的資訊，才能發揮作用。舉例來說，如要建立由生成式 AI 模型驅動的客戶服務聊天機器人，模型必須能存取您提供的產品和服務資訊。在 Vertex AI 中，您可以使用基礎和函式呼叫功能，協助模型存取外部資訊。
封鎖有害內容：
生成式 AI 模型可能會生成預期外的輸出內容，包括令人反感或未顧及感受的文字。為維護安全及防止濫用，模型需要安全篩選機制，才能封鎖可能有害的提示和回覆。Vertex AI 內建安全功能，可促進生成式 AI 服務的負責任使用。
下圖顯示這些不同功能如何協同運作，生成您想要的內容：
提示
|
生成式 AI 工作流程通常從提示開始。提示是傳送給生成式 AI 模型的自然語言要求，用來引導模型提供回覆。視模型而定，提示可以包含文字、圖片、影片、音訊、文件和其他模態，甚至可以包含多種模態 (多模態)。 建立提示，讓模型提供所需的回覆，這個過程稱為提示設計。雖然提示設計是反覆試錯的過程，但您可以運用提示設計原則和策略，引導模型做出符合預期的行為。 Vertex AI Studio 提供提示管理工具，協助您管理提示。 |
基礎模型
|
提示會傳送給生成式 AI 模型，以生成回覆。 Vertex AI 提供各種生成式 AI 基礎模型，可透過受管理 API 存取，包括：
這些模型的大小、模態和費用各不相同。您可以在 Model Garden 中探索 Google 模型，以及開放式模型和 Google 合作夥伴的模型。 |
自訂模型
|
您可以自訂 Google 基礎模型的預設行為，確保模型能持續生成符合預期的結果，而不必輸入複雜的提示。這項自訂程序稱為「模型微調」。調整模型有助於簡化提示，減少要求的成本和延遲時間。 Vertex AI 也提供模型評估工具，協助您評估微調模型的效能。調整後的模型準備好投入生產後，您就可以將模型部署至端點，並監控效能，就像標準的 MLOps 工作流程一樣。 |
存取外部資訊
|
Vertex AI 提供多種方式，讓模型存取外部 API 和即時資訊。 |
引文檢查
|
生成回覆後，Vertex AI 會檢查是否需要在回覆中加入引文。如果回應中的大部分文字出自同一來源，系統會在回應的引文中繼資料中加入該來源。 |
負責任的 AI 技術與安全
|
提示和回覆在傳回前，會經過最後一層檢查，也就是安全篩選器。Vertex AI 會檢查提示和回覆，判斷提示或回覆屬於安全類別的程度。如果一或多個類別超出門檻，系統會封鎖回應，且 Vertex AI 會傳回備用回應。 |
回應
|
如果提示和回應通過安全篩選器檢查，系統就會傳回回應。通常系統會一次傳回所有回應。不過，啟用串流後，您也可以在 Vertex AI 生成回覆的同時逐步接收回覆。 |
開始使用
如要開始在 Vertex AI 上使用生成式 AI，請試試下列任一快速入門導覽。
-
使用 Vertex AI Gemini API 生成文字使用 SDK 將要求傳送至 Vertex AI Gemini API。
-
使用 Vertex AI Studio 提示範本庫向 Gemini 傳送提示測試提示，無須進行任何設定。
-
使用 Imagen 生成圖片並驗證浮水印使用 Vertex AI 的 Imagen 建立浮水印圖片。