Compara instrucciones

La función Comparar te permite ver cómo un parámetro de configuración, un modelo o una instrucción diferente cambian el resultado del modelo. Puedes ver cada una de las instrucciones y sus respuestas una al lado de la otra para compararlas y analizarlas de las siguientes maneras:

  • Con una instrucción nueva
  • Con otra instrucción guardada
  • Con una verdad fundamental

Antes de comenzar

Para acceder a la función de comparación, sigue estos pasos:

  1. En la consola de Google Cloud , ve a la página Crear instrucciones.

    Ir a Crear mensaje

  2. Seleccione Comparar. Aparecerá la página Comparar.

Cómo crear una instrucción en la función Comparar

En la página Comparar, puedes crear una instrucción antes de seleccionar otra para comparar los resultados.

Para crear una instrucción, sigue estos pasos:

  1. En el campo New Prompt, ingresa tu instrucción.

  2. Haz clic en Enviar instrucciones. La respuesta del modelo aparece debajo del texto de la instrucción que ingresaste.

  3. Haz clic en Guardar como nueva. Aparecerá un cuadro de diálogo de Guardar.

  4. Ingresa el nombre de tu nuevo mensaje en el campo Nombre del mensaje.

  5. Selecciona tu región en el campo Región o déjala como la región predeterminada.

  6. Si se aplica una clave de encriptación administrada por el cliente (CMEK), haz lo siguiente:

    1. Selecciona la casilla de verificación Clave de encriptación administrada por el cliente (CMEK).
    2. Selecciona una clave en el campo Selecciona una clave de Cloud KMS.

  7. Haz clic en Guardar para guardar la instrucción en la lista de instrucciones que se usarán en la página Comparar instrucción guardada.

  8. Haz clic en Enviar instrucciones para comparar las instrucciones y sus respuestas.

Puedes actualizar tus instrucciones y guardar las versiones actualizadas como instrucciones nuevas.

Comparar con una instrucción nueva

Para comparar el mensaje guardado con un mensaje nuevo, sigue estos pasos:

  1. Haz clic en Comparar nueva instrucción. Aparecerá el panel Comparar.
  2. Opcional: Haz clic en Cambiar modelo para usar un modelo diferente del predeterminado.
  3. Opcional: Expande Salidas.
    4. Outputs:
    1. Opcional: Si quieres que el modelo genere la respuesta en un formato específico, como JSON, haz clic en el botón de activación Salida estructurada. Después de seleccionar Salida estructurada, se desactivan las opciones de fundamentación, ya que esta no se admite con la salida estructurada.
    2. Opcional: Cambia el Presupuesto de consideración a una de las siguientes opciones:
      • Automático: El modelo solo piensa cuando es necesario. El modelo ajusta por cuánto tiempo piensa o analiza una situación en función de lo que se necesite en ese momento.
      • Manual: Puedes ajustar los tokens del presupuesto de pensamiento.
      • Desactivado: No se usan presupuestos ni pensamiento.
  1. Expande Herramientas (opcional).
    2. Herramientas:
    1. Selecciona una de las siguientes opciones:
      • Fundamentación: Google: Fundamentación con la Búsqueda de Google o Google Maps.
      • Fundamentación: Tus datos: Fundamentación con RAG Engine de Vertex AI, Vertex AI Search o Elasticsearch.
        1. Si seleccionas Fundamentación: Tus datos, elige la fuente de datos que deseas usar.
  1. Opcional: Expande Avanzado:
    2. Avanzado:
    1. Selecciona la Región.
    2. Selecciona Configuración del filtro de seguridad. Aparecerá un cuadro de diálogo. Mantén la opción predeterminada Desactivado o especifica Bloquear pocos, Bloquear algunos o Bloquear la mayoría para cada una de las siguientes opciones:
      • Incitación al odio o a la violencia: Comentarios negativos o dañinos que se orientan a la identidad o los atributos protegidos.
      • Contenido peligroso: Promueve o habilita el acceso a bienes, servicios y actividades perjudiciales.
      • Contenido sexual explícito: Incluye referencias a actos sexuales o a otro contenido obsceno.
      • Contenido de hostigamiento: Comentarios maliciosos, intimidantes, de bullying o abusivos dirigidos a otra persona.
    3. Haz clic en Guardar para guardar la configuración y cerrar el diálogo.
    4. Selecciona la temperatura en el campo Temperatura. La temperatura controla la aleatoriedad en la selección de tokens. Una temperatura más baja es buena cuando esperas una respuesta verdadera o correcta. Una temperatura más alta puede generar resultados más diversos o inesperados.
    5. Selecciona el límite de tokens de salida en el campo Límite de tokens de salida. El límite de tokens de salida determina la cantidad máxima de salida de texto a partir de una instrucción. Un token tiene aproximadamente cuatro caracteres.
    6. Selecciona la cantidad máxima de respuestas en el campo Respuestas máx.. Si es la cantidad máxima de respuestas del modelo generadas por instrucción. Aún se pueden bloquear las respuestas debido a los filtros de seguridad y otras políticas.
    7. Selecciona un valor en el campo Top-P. El parámetro Top-P cambia la manera en la que el modelo selecciona los tokens para el resultado.
    8. Haz clic en el botón de activación del campo Transmitir respuestas del modelo. Si se selecciona, las respuestas se imprimen a medida que se generan.
    9. Ingresa una secuencia de detención en el campo Agregar una secuencia de detención. Presiona Intro después de cada secuencia.
  1. Haz clic en Guardar para guardar los cambios en la configuración.
  2. Haz clic en Aplicar.
  3. Haz clic en Enviar instrucciones para comparar las instrucciones y sus respuestas.

Para obtener más información sobre los límites de tokens de cada modelo, consulta Cómo controlar el presupuesto de procesamiento.

Comparar con otra instrucción guardada

Para comparar tu instrucción guardada con otra instrucción guardada, sigue estos pasos:

  1. Haz clic en Comparar instrucción guardada. Aparecerá el panel Existing Prompt.

  2. Elige hasta dos instrucciones existentes para comparar.

    1. Selecciona un nombre de instrucción. Si tienes muchas instrucciones en tu lista, haz clic en el campo Filtro y selecciona la propiedad por la que deseas filtrar. Ingresa un valor y presiona Intro.
    2. Haz clic en Aplicar. En la página Comparar, se muestra la instrucción que seleccionaste junto con otras instrucciones que creaste o seleccionaste para comparar.

  3. Haz clic en Enviar instrucciones para comparar las instrucciones y sus respuestas.

Comparar con una verdad fundamental

La verdad fundamental es la respuesta preferida para la instrucción. Todas las demás respuestas del modelo se evalúan en función de la respuesta de verdad fundamental.

Para comparar tu instrucción guardada con una verdad fundamental, sigue estos pasos:

  1. Haz clic en Verdad fundamental. Aparecerá el panel Verdad fundamental.
  2. Ingresa tu verdad fundamental para generar métricas de evaluación adicionales.
  3. Haz clic en Guardar para guardar la verdad fundamental.
  4. Haz clic en Enviar instrucciones para comparar las instrucciones y sus respuestas.

Las métricas de evaluación que se generan cuando comparas una instrucción con una verdad fundamental no se ven afectadas por la región que selecciones.

¿Qué sigue?