Recetario de IA generativa en Vertex AI

Una colección de guías y ejemplos de IA generativa en Vertex AI.

Obtén más información en el repositorio de IA generativa en GitHub.

Guías de inicio rápido de Gemini

  • bombilla

    Introducción a Gemini

    Comienza a usar Gemini en Vertex AI con el SDK de Python.

    Gemini

    Ver en GitHub  
  • psicología

    Introducción a la ingeniería de instrucciones

    Aprende los aspectos básicos y las prácticas recomendadas de la ingeniería de instrucciones.

    Gemini Sugerencias

    Ver en GitHub  
  • función

    Llamadas a funciones con Gemini

    Conecta Gemini a herramientas externas con llamadas a función.

    Llamadas a funciones Gemini

    Ver en GitHub  
  • césped

    Conexión a tierra con Gemini

    Conecta Gemini a datos del mundo real de la Búsqueda de Google o Vertex AI Search para mejorar la calidad de las respuestas.

    Gemini Fundamentos RAG Búsqueda

    Ver en GitHub  
  • batch_prediction

    Predicción por lotes de Gemini

    Usa la predicción por lotes para ejecutar inferencias en una gran cantidad de ejemplos.

    Predicción por lotes Gemini

    Ver en GitHub  
  • window_closed

    Ventana de contexto larga

    Usa la ventana de contexto larga para procesar grandes cantidades de datos multimodales.

    Gemini

    Ver en GitHub  
  • almacenado en caché

    Introducción al almacenamiento en caché de contexto

    Usa el almacenamiento en caché de contexto para almacenar datos que se usan con frecuencia.

    Gemini

    Ver en GitHub  
  • file_json

    Introducción a la generación controlada con la API de Gemini

    Aprende a controlar los formatos de salida de la API de Gemini para facilitar el procesamiento de datos.

    Gemini

    Ver en GitHub  
  • view_object_track

    Llama a Gemini con la biblioteca de OpenAI

    Obtén más información para llamar a Gemini con Chat Completions.

    Gemini

    Ver en GitHub  
  • record_voice_over

    Comienza a usar Chirp 2 para Speech-to-Text

    Obtén información para usar Chirp 2, la generación más reciente de los modelos de reconocimiento de voz automático multilingüe de Google.

    Chirp Discurso

    Ver en GitHub  
  • add_photo_alternate

    Introducción a la generación de imágenes de Imagen 3

    Usa Imagen 3 para crear imágenes fotorrealistas.

    Imagen Multimodal

    Ver en GitHub  
  • graph_3

    Usa la multiherramienta de IA, las incorporaciones y la Búsqueda de vectores de Vertex AI para realizar coincidencias semánticas.

    Incorporaciones Búsqueda de vectores

    Ver en GitHub  
  • cuervo

    Introducción a LangGraph con Gemini

    Aprende a combinar las capacidades de flujo de trabajo de LangGraph con las habilidades de generación y comprensión del lenguaje de Gemini para optimizar y automatizar tareas complejas de análisis financiero.

    Gemini LangChain LangGraph Orchestration

    Ver en GitHub  
  • podcasts

    Crea episodios de podcasts personalizados

    Usa Gemini, LangGraph y Text-to-Speech para crear episodios de podcasts personalizados.

    Gemini LangChain LangGraph Orchestration Speech

    Ver en GitHub  
  • menu_book

    Narración de historias con Gemini y Text-to-Speech

    Usa Gemini y la función de Text-to-Speech para crear y leer una historia con varios personajes.

    Gemini Voz

    Ver en GitHub  
  • código

    Cómo analizar una base de código

    Usa Gemini para generar código, resumir una base de código, depurar, mejorar el código y evaluar código.

    Gemini Multimodal

    Ver en GitHub  
  • vacunas

    Seguridad de LLM para desarrolladores

    Obtén información sobre los ataques de inserción de instrucciones y cómo mitigarlos.

    Gemini Solicitud Seguridad

    Ver en GitHub  
  • Soluciona problemas

    Gen AI Evaluation Service

    Evalúa las respuestas de Gemini con métricas y conjuntos de datos personalizados.

    Evaluación Gemini

    Ver en GitHub  
  • tune

    Ajuste supervisado con Gemini

    Descubre cómo ajustar Gemini para tareas específicas.

    Gemini Afinación

    Ver en GitHub  
  • dry_cleaning

    Introducción al motor de RAG de Vertex AI

    Compila flujos de trabajo de RAG personalizados con Gemini y el motor de RAG de Vertex AI.

    Gemini RAG

    Ver en GitHub  
  • descripción

    Procesamiento de documentos con Gemini

    Usa Gemini para procesar documentos para su clasificación, extracción y resumen.

    Gemini Multimodal

    Ver en GitHub  

Todos los instructivos

Filtrar por:
Gemini

Introducción a Gemini

Comienza a usar Gemini en Vertex AI con el SDK de Python.

Ver en GitHub
Gemini
Mensajes

Introducción a la ingeniería de instrucciones

Aprende los aspectos básicos y las prácticas recomendadas de la ingeniería de instrucciones.

Ver en GitHub
Llamadas a función
Gemini

Llamadas a funciones con Gemini

Conecta Gemini a herramientas externas con llamadas a función.

Ver en GitHub
Gemini
Fundamentación
RAG
Buscar

Cómo establecer una conexión a tierra con Gemini

Conecta Gemini a datos del mundo real de la Búsqueda de Google o Vertex AI Search para mejorar la calidad de las respuestas.

Ver en GitHub
Predicción por lotes
Gemini

Predicción por lotes de Gemini

Usa la predicción por lotes para ejecutar inferencias en una gran cantidad de ejemplos.

Ver en GitHub
Gemini

Ventana de contexto extensa

Usa la ventana de contexto larga para procesar grandes cantidades de datos multimodales.

Ver en GitHub
Gemini

Introducción al almacenamiento de contexto en caché

Usa el almacenamiento en caché de contexto para almacenar datos que se usan con frecuencia.

Ver en GitHub
Gemini

Introducción a la generación controlada con la API de Gemini

Aprende a controlar los formatos de salida de la API de Gemini para facilitar el procesamiento de datos.

Ver en GitHub
Gemini

Llama a Gemini con la biblioteca de OpenAI

Obtén más información para llamar a Gemini con Chat Completions.

Ver en GitHub
Chirp
Voz

Comienza a usar Chirp 2 para Speech-to-Text

Obtén información para usar Chirp 2, la generación más reciente de los modelos de reconocimiento de voz automático multilingüe de Google.

Ver en GitHub
Imagen
Multimodal

Introducción a la generación de imágenes de Imagen 3

Usa Imagen 3 para crear imágenes fotorrealistas.

Ver en GitHub
Incorporaciones
Búsqueda de vectores

Comienza a usar las incorporaciones de texto + búsqueda de vectores de Vertex AI

Usa la multiherramienta de IA, las incorporaciones y la Búsqueda de vectores de Vertex AI para realizar coincidencias semánticas.

Ver en GitHub
Gemini
LangChain
LangGraph
Organización

Introducción a LangGraph con Gemini

Aprende a combinar las capacidades de flujo de trabajo de LangGraph con las habilidades de generación y comprensión del lenguaje de Gemini para optimizar y automatizar tareas complejas de análisis financiero.

Ver en GitHub
Gemini
LangChain
LangGraph
Organización
Voz

Cómo crear episodios de podcasts personalizados

Usa Gemini, LangGraph y Text-to-Speech para crear episodios de podcasts personalizados.

Ver en GitHub
Gemini
Voz

Cuenta historias con Gemini y Texto a voz

Usa Gemini y la función de Text-to-Speech para crear y leer una historia con varios personajes.

Ver en GitHub
Gemini
Multimodal

Analiza una base de código

Usa Gemini para generar código, resumir una base de código, depurar, mejorar el código y evaluar código.

Ver en GitHub
Gemini
Mensajes
Seguridad

Seguridad de LLM para desarrolladores

Obtén información sobre los ataques de inserción de instrucciones y cómo mitigarlos.

Ver en GitHub
Evaluación
Gemini

Servicio de evaluación de IA generativa

Evalúa las respuestas de Gemini con métricas y conjuntos de datos personalizados.

Ver en GitHub
Gemini
Ajuste

Ajuste fino supervisado con Gemini

Descubre cómo ajustar Gemini para tareas específicas.

Ver en GitHub
Gemini
RAG

Introducción al motor de RAG de Vertex AI

Compila flujos de trabajo de RAG personalizados con Gemini y el motor de RAG de Vertex AI.

Ver en GitHub
Gemini
Multimodal

Procesamiento de documentos con Gemini

Usa Gemini para procesar documentos para su clasificación, extracción y resumen.

Ver en GitHub
Gemini
Multimodal
Mensajes

Gemini con datos multimodales

Cómo enviar instrucciones a Gemini con datos multimodales (texto, documentos, imágenes, video y audio)

Ver en GitHub
Gemini

Comienza a usar la API de REST de Gemini (cURL)

Usa la API de Gemini con REST/curl.

Ver en GitHub
Evaluación
Gemini
Mensajes

Ingeniería de instrucciones, evaluación y plantillas de instrucciones

Usa el SDK de Gen AI Evaluation Service para la ingeniería y evaluación de instrucciones.

Ver en GitHub
Incorporaciones
Multimodal

Introducción a las incorporaciones multimodales

Obtén información sobre las incorporaciones multimodales.

Ver en GitHub
Incorporaciones
Ajuste

Introducción al ajuste de incorporaciones

Aprende a ajustar los modelos de incorporaciones.

Ver en GitHub
Incorporaciones
Búsqueda de vectores

Incorporaciones de tipo de tarea

Obtén información para obtener mejores incorporaciones para tu tarea específica.

Ver en GitHub
Incorporaciones
Búsqueda de vectores

Búsqueda híbrida con Vector Search de Vertex AI

Aprende a usar la búsqueda híbrida con la Búsqueda de vectores de Vertex AI, que combina la búsqueda semántica y de palabras clave.

Ver en GitHub
Agentes
Gemini
LangChain
LangGraph

Agentes de IA para ingenieros (evolución de los agentes de IA)

En este notebook, se muestran 3 enfoques diferentes para generar ensayos con la API de Gemini, sin entrenamiento previo, paso a paso con LangChain y iterativo con LangGraph.

Ver en GitHub
Gemma
Hugging Face

DLC de Hugging Face: Publicación de Gemma con la inferencia de generación de texto (TGI) en Vertex AI

Aprende a implementar Google Gemma desde Hugging Face Hub en Vertex AI con el contenedor de aprendizaje profundo (DLC) de Hugging Face para la inferencia de generación de texto (TGI).

Ver en GitHub
Gemma
LangChain
RAG

Inferencia de GPU de Cloud Run: Preguntas y respuestas sobre RAG de Gemma 2 con Ollama y LangChain

Aprende a implementar Gemma 2 en Cloud Run para compilar una aplicación de preguntas y respuestas de RAG simple.

Ver en GitHub
Gemma
Hugging Face

DLC de Hugging Face: Publica PaliGemma con la inferencia de Pytorch en Vertex AI con un controlador personalizado

Obtén información para implementar Google PaliGemma desde Hugging Face Hub en Vertex AI con el contenedor de aprendizaje profundo (DLC) de Hugging Face para la inferencia de Pytorch en combinación con un controlador personalizado.

Ver en GitHub
Gemma
Hugging Face
Ajuste

DLCs de Hugging Face: Cómo ajustar Gemma con el aprendizaje por refuerzo de transformadores (TRL) en Vertex AI

Aprende a ajustar Gemma con el aprendizaje reforzado de transformadores (TRL) en Vertex AI.

Ver en GitHub
Hugging Face

Adivina quién o qué app usa el modelo de contenedor de aprendizaje profundo de Hugging Face en Vertex AI

Crea una aplicación de"Adivina quién o qué" con Vertex AI, el contenedor de aprendizaje profundo de Hugging Face, un modelo abierto de generación de imágenes y Gemini para resolver y visualizar acertijos.

Ver en GitHub
Incorporaciones

Visualización de similitud de incorporaciones en documentos de texto con trazados de t-SNE

Visualiza la similitud de incorporaciones de documentos de texto con los trazados de t-SNE.

Ver en GitHub
Incorporaciones
Búsqueda de vectores

Guía de inicio rápido de la búsqueda de vectores de Vertex AI Search

Aprende a usar la Búsqueda de vectores de Vertex AI para encontrar documentos de texto similares.

Ver en GitHub
Incorporaciones
Gemini
Búsqueda de vectores

Detección de anomalías en registros de infraestructura con Gemini y la búsqueda vectorial de BigQuery

Aprende a analizar grandes volúmenes de registros de infraestructura con Gemini, incorporaciones de vectores y la Búsqueda de vectores de BigQuery para realizar la detección de anomalías.

Ver en GitHub
Incorporaciones
Gemini

Detección e investigación de anomalías de registros con incorporaciones de texto y búsqueda de vectores de BigQuery

Aprende a analizar grandes volúmenes de registros de auditoría con Gemini, incorporaciones de vectores y la Búsqueda de vectores de BigQuery para realizar la detección de anomalías.

Ver en GitHub
Llamadas a función
Gemini

Trabaja con estructuras de datos y esquemas en las llamadas a funciones de Gemini

Obtén más información para usar las llamadas a funciones de Gemini con estructuras de datos y esquemas.

Ver en GitHub
Llamadas a función
Gemini

Trabaja con llamadas a función paralelas y respuestas de varias funciones en Gemini

Obtén más información para usar llamadas a función paralelas y respuestas de varias funciones en Gemini.

Ver en GitHub
Llamadas a función
Gemini
Mensajes

Introducción a los agentes de ReAct con Gemini y llamadas a funciones

Obtén información para usar agentes de ReAct con Gemini y llamadas a funciones.

Ver en GitHub
Llamadas a función
Gemini

Llamadas a funciones forzadas con configuraciones de herramientas en Gemini

Obtén información para usar llamadas a funciones forzadas con parámetros de configuración de herramientas en Gemini.

Ver en GitHub
Llamadas a función
Gemini

Cómo usar las llamadas a funciones de Gemini para obtener noticias y estadísticas de empresas en tiempo real

Aprende a usar las llamadas a funciones de Gemini para obtener noticias y estadísticas de la empresa en tiempo real.

Ver en GitHub
Llamadas a función
Gemini
Multimodal

Llamadas a funciones multimodales con la API de Gemini y el SDK de Python

Obtén más información para usar la Llamada a funciones multimodales de Gemini.

Ver en GitHub
Gemini
RAG
RAG Engine

Técnicas avanzadas de RAG: Evaluación de la calidad de la recuperación del motor de RAG de Vertex y ajuste de hiperparámetros

Aprende sobre las técnicas avanzadas de RAG con la evaluación y el ajuste de hiperparámetros.

Ver en GitHub
Gemini
RAG
RAG Engine

Motor de RAG de Vertex AI con Pinecone

Aprende a usar Pinecone con el motor de RAG de Vertex AI.

Ver en GitHub
Gemini
RAG
RAG Engine

Motor de RAG de Vertex AI con Weaviate

Aprende a usar Weaviate con el motor de RAG de Vertex AI.

Ver en GitHub
Gemini
RAG
RAG Engine

Motor de RAG de Vertex AI con Vertex AI Feature Store

Aprende a usar Vertex AI Feature Store con el motor de RAG de Vertex AI.

Ver en GitHub
Gemini
RAG
RAG Engine

Motor de RAG de Vertex AI con Vector Search de Vertex AI

Aprende a usar la Búsqueda de vectores de Vertex AI con el motor de RAG de Vertex AI.

Ver en GitHub
Agentes
Gemini
Reasoning Engine

Agentes de depuración y optimización: Una guía de seguimiento en Reasoning Engine

Obtén información para usar el seguimiento en Reasoning Engine.

Ver en GitHub
Gemini
LangChain
Reasoning Engine

Implementa una aplicación de RAG con AlloyDB en LangChain en Vertex AI

Ver en GitHub
Agentes
Gemini
RAG
Reasoning Engine
Buscar

Cómo compilar un agente de búsqueda conversacional con Reasoning Engine y RAG en Vertex AI Search

Ver en GitHub
Agentes
Gemini
Reasoning Engine

Introducción a la compilación y la implementación de un agente con Reasoning Engine en Vertex AI

Ver en GitHub
Agentes
Gemini
LangGraph
RAG
Reasoning Engine

Cómo compilar una aplicación de RAG multiagente con LangGraph y Reasoning Engine

Ver en GitHub
Gemini
LangGraph
RAG
Reasoning Engine

Cómo implementar una aplicación de RAG con Cloud SQL para PostgreSQL en LangChain en Vertex AI

Ver en GitHub
Agentes
Gemini
Reasoning Engine

Cómo compilar e implementar un agente de la API de Google Maps con Reasoning Engine

Ver en GitHub
Gemini
LangGraph
Reasoning Engine

Compila e implementa una aplicación de LangGraph con Reasoning Engine en Vertex AI

Ver en GitHub
Gemini
Multimodal

Gemini 1.5: Un taller sobre casos de uso multimodales

Ver en GitHub
Gemini
Multimodal

Análisis de videos con Gemini

Ver en GitHub
Gemini
Multimodal

Análisis de videos de YouTube con Gemini

Ver en GitHub
Gemini
Multimodal
Búsqueda de vectores

Cómo compilar un chatbot multimodal para reclamos de garantía con Gemini y Vector Search en Vertex AI

Ver en GitHub
Gemini
Multimodal
RAG

Generación mejorada por recuperación (RAG) multimodal con la API de Gemini en Vertex AI

Ver en GitHub
Gemini
LlamaIndex
RAG

LlamaIndex con Vertex AI Vector Search para realizar la RAG de respuesta a preguntas

Ver en GitHub
Gemini
LangChain
Multimodal
RAG

Generación aumentada de recuperación (RAG) multimodal con Gemini, Vertex AI Vector Search y LangChain

Ver en GitHub
Gemini
RAG

Generación aumentada de recuperación de pequeño a grande

Ver en GitHub
Gemini
Mensajes

ReAct (razonamiento y actuación) + herramienta personalizada para la API de Healthcare NL + Gemini 1.5 Pro + LangChain

Ver en GitHub
Gemini
Mensajes

Usa Gemini en la educación

Ver en GitHub
Gemini
Mensajes

Experiencia de compilación rápida de IA

Ver en GitHub
Gemini
Multimodal
RAG

Generación aumentada de recuperación de código (RAG) con la API de Gemini

Ver en GitHub
Gemini
Multimodal

Generación de fichas de productos con Gemini 1.5 Pro

Ver en GitHub
Gemini
Multimodal

Recomendación de venta minorista multimodal: usa Gemini para recomendar artículos en función de imágenes y razonamiento de imágenes

Ver en GitHub
Gemini
Multimodal
Mensajes

Análisis de partituras con Gemini

Ver en GitHub
Gemini
Multimodal

Analiza pósteres de películas en BigQuery con Gemini 1.5 Flash

Ver en GitHub
Gemini
LangChain

Primeros pasos con LangChain 🦜️🔗 y la API de Gemini en Vertex AI

Ver en GitHub
Agentes
Gemini

Cómo compilar un agente meteorológico con AutoGen y Gemini

Ver en GitHub
Gemini
Mensajes

IU del notebook del optimizador de instrucciones de Vertex AI

Ver en GitHub
Gemini
Mensajes

Optimizador de instrucciones de Vertex AI: Uso de la herramienta

Ver en GitHub
Gemini
Mensajes

Optimizador de instrucciones de Vertex AI: Métrica personalizada

Ver en GitHub
Gemini
Mensajes

Introducción al optimizador de instrucciones de Vertex AI

Ver en GitHub
Gemini
Mensajes

Resumen de textos con modelos generativos en Vertex AI

Ver en GitHub
Gemini
Mensajes

Creación de modelos generativos en Vertex AI

Ver en GitHub
Gemini
Mensajes

Cadena de pensamiento y reacción

Ver en GitHub
Gemini
Mensajes

Búsqueda de respuestas con modelos generativos en Vertex AI

Ver en GitHub
Gemini
Mensajes

Clasificación de texto con modelos generativos en Vertex AI

Ver en GitHub
Gemini
Mensajes

Extracción de texto con modelos generativos en Vertex AI

Ver en GitHub
Gemini
Ajuste

Ajuste fino supervisado con Gemini 1.5 Flash para la detección de cambios

Ver en GitHub
Gemini
Ajuste

Cantidad de tokens de ajuste supervisado y estimación de costos de Vertex AI

Ver en GitHub
Gemini
Ajuste

Ajuste fino supervisado con Gemini 1.5 Flash para preguntas y respuestas

Ver en GitHub
Gemini
Ajuste

Ajuste fino supervisado con Gemini 1.5 Pro para el subtitulado de imágenes

Ver en GitHub
Evaluación
Gemini
Model Garden

Usa el SDK de Gen AI Evaluation para evaluar modelos en Vertex AI Studio, Model Garden y Model Registry

Ver en GitHub
Evaluación
Gemini
RAG

Evalúa las respuestas generadas a partir de la generación de aumento de recuperación (RAG) con la evaluación rápida y la ML de Dataflow con Vertex AI Pipelines

Ver en GitHub
Evaluación
Gemini

Mejora la calidad y la explicabilidad con la evaluación de Vertex AI

Ver en GitHub
Evaluación
Gemini

Evalúa y compara la configuración del modelo de IA generativa

Ver en GitHub
Evaluación
Gemini

Usa métricas personalizadas para crear tu propio clasificador automático

Ver en GitHub
Evaluación
Gemini

Evalúa un modelo de traducción

Ver en GitHub
Evaluación
Gemini

Compara y migra de PaLM al modelo de Gemini

Ver en GitHub
Evaluación
Gemini
Multimodal

Cómo evaluar tareas multimodales

Ver en GitHub
Evaluación
Gemini
LangChain

Evalúa LangChain

Ver en GitHub
Evaluación
Gemini

Compara modelos de IA generativa

Ver en GitHub
Evaluación
Gemini
RAG

Evalúa las respuestas generadas a partir de RAG para la QA con el SDK de Gen AI Evaluation Service

Ver en GitHub
Evaluación
Gemini

Cómo personalizar las métricas basadas en modelos para evaluar un modelo de IA generativa

Ver en GitHub
Evaluación
Gemini
RAG

Evalúa el uso de herramientas de modelos generativos

Ver en GitHub
Evaluación
Gemini

Comienza a usar el servicio de evaluación de IA generativa

Ver en GitHub
Gemini
Mensajes
RAG
Seguridad

Seguridad de la IA generativa y LLM: Ataques y mitigaciones de ReAct y RAG

Ver en GitHub
Gemini
Seguridad

IA responsable con la API de Gemini en Vertex AI: Calificaciones de seguridad y umbrales

Ver en GitHub
Predicción por lotes
Gemini

Supervisa la predicción por lotes con la API de Gemini

Ver en GitHub
Predicción por lotes
Gemini

Introducción a las predicciones por lotes con la API de Gemini mediante la entrada de BigQuery

Ver en GitHub
Gemini
Imagen
Multimodal

Crea recursos visuales de alta calidad con Imagen y Gemini

Ver en GitHub
Imagen
Multimodal

Crea un documento de Photoshop con segmentación de imágenes en Vertex AI

Ver en GitHub
Gemini
Imagen
Multimodal

Cómo mejorar las instrucciones de imagen con Gemini

Ver en GitHub
Imagen
Multimodal

Segmentación de imágenes en Vertex AI

Ver en GitHub
Buscar

Vertex AI Search con filtros y metadatos

Ver en GitHub
Gemini
Buscar

Vertex AI Search: Consulta de apps de datos combinados y resumen con Gemini

Ver en GitHub
Buscar

Crea un almacén de datos y un motor de búsqueda de Vertex AI Search

Ver en GitHub
Buscar

Cómo crear aplicaciones de búsqueda con Vertex AI Search

Ver en GitHub
Gemini
LangChain
RAG
Buscar

Búsqueda de respuestas en documentos

Ver en GitHub
Gemini
RAG
Buscar

Respuestas masivas de preguntas con Vertex AI Search

Ver en GitHub
Incorporaciones
Buscar

Incorporaciones personalizadas con Vertex AI Search

Ver en GitHub
Chirp
Voz

Comienza a usar Chirp 2: Funciones avanzadas

Ver en GitHub
Claude
Llamadas a función
Model Garden

Llamadas a funciones multimodales con modelos Claude

Ver en GitHub
Agentes
Buscar

Verificador de estado del almacén de datos de Vertex AI Search and ConversationI

Ver en GitHub

¿Qué sigue?