MongoDB（版本 2）

通过 MariaDB 连接器，您可以对 MariaDB 数据库执行插入、删除、更新和读取操作。

支持的版本

• MongoDB 3.6 到 6.1 版
• 在 Google Cloud 上部署的 Mongo Atlas。

准备工作

在使用 MongoDB 连接器之前，请先完成以下任务：

• 在您的 Google Cloud 项目中：
  • 向配置连接器的用户授予 roles/connectors.admin IAM 角色。
  • 将以下 IAM 角色授予您要用其来使用连接器的服务账号：
    • roles/secretmanager.viewer
    • roles/secretmanager.secretAccessor

    服务账号是一种特殊类型的 Google 账号，用于表示需要验证身份并获得授权以访问 Google API 数据的非人类用户。如果您没有服务账号，则必须创建一个服务账号。如需了解详情，请参阅创建服务账号。

  • 启用以下服务：
    • secretmanager.googleapis.com (Secret Manager API)
    • connectors.googleapis.com (Connectors API)

    如需了解如何启用服务，请参阅启用服务。

  如果之前没有为您的项目启用这些服务或权限，则在您配置连接器时，系统会提示您启用。

配置连接器

配置连接器时，您需要创建与数据源（即后端系统）的连接。一个连接需专用于一个数据源。这意味着，如果您有许多数据源，则必须为每个数据源创建单独的连接。如需创建连接，请执行以下步骤：

1. 在 Cloud 控制台 中，进入 Integration Connectors > 连接页面，然后选择或创建一个 Google Cloud 项目。

   转到“连接”页面

2. 点击 + 新建以打开创建连接页面。
3. 在位置部分中，选择连接的位置。
   1. 区域：从下拉列表中选择一个位置。

      如需查看所有受支持区域的列表，请参阅位置。

   2. 点击下一步。
4. 在连接详情部分中，完成以下操作：
   1. 连接器：从可用连接器的下拉列表中选择 MongoDB。
   2. 连接器版本：从可用版本的下拉列表中选择版本 2 2。
   3. 在连接名称字段中，输入连接实例的名称。

      连接名称必须符合以下条件：

      • 连接名称可以使用字母、数字或连字符。
      • 字母必须小写。
      • 连接名称必须以字母开头，以字母或数字结尾。
      • 连接名称不能超过 49 个字符。
   4. （可选）输入连接实例的说明。
   5. 您可以选择启用 Cloud Logging，然后选择日志级别。默认情况下，日志级别设置为 Error。
   6. 服务账号：选择具有所需角色的服务账号。
   7. （可选）配置连接节点设置：
      • 节点数下限：输入连接节点数下限。
      • 节点数上限：输入连接节点数上限。

      节点是处理事务的连接单元（或副本）。 连接处理越多事务就需要越多节点，相反，处理越少事务需要越少节点。 如需了解节点如何影响连接器价格，请参阅连接节点的价格。如果未输入任何值，则默认情况下，节点数下限设置为 2（以便提高可用性），节点数上限设置为 50。

   注意：仅当您是随用随付客户时，才能自定义连接节点值。
   8. 数据库：MongoDB 数据库的名称。
   9. 连接超时：连接超时（以秒为单位）。
   10. Use SSL：指定是否启用了 SSL。
   11. App Name（应用名称）：Mongo 的自定义应用名称。
   12. 最大过时秒数：次要实例可能过时的时间（以秒为单位） 在客户端停止使用它进行读取操作之前。
   13. Write Concern(w Option)：用于请求确认 操作已传播到带有特定标记的指定数量的实例。
   14. 写入关注操作（wtimeoutMS 选项）：指定写入关注操作的时间限制（以毫秒为单位）。
   15. Write Concern(Journal Option)：向 MongoDB 请求确认 写入操作已写入该日志。
   16. 读取偏好设置：将此项设置为从副本集读取的策略。接受的值包括 primary、primaryPreferred、secondary、secondaryPreferred 和 nearest.
   17. 集群类型：指定 MongoDB 集群的类型。
   18. 启用加密：指定是否启用加密功能。
   19. 加密类型：指定启用的加密类型。目前 仅支持 Local Encryption 类型。
   20. Encryption Schema：指定加密架构信息，包括 字段和加密算法、键替代名称、查询类型和争用因子。 例如：

       {
         "database.collection": {
           "encryptMetadata": {
             "algorithm": "parentAlgo"
           },
           "properties": {
             "passportId": {},
             "medicalRecords": {
               "encryptMetadata": {
                 "algorithm": "medicalRecordParentAlgo"
               },
               "properties": {
                 "medicalRecord1": {},
                 "medicalRecord2": {
                   "encrypt": {
                     "algorithm": "medicalRecord2Algo",
                     "keyAltName": "medicalRecord2Altkey",
                     "queryType": "equality",
                     "contentionFactor": 3
                   }
                 }
               }
             },
             "insuranceProperties": {
               "properties": {
                 "policyNumber": {},
                 "insuranceRecord1": {
                   "encrypt": {
                     "algorithm": "insuranceRecord1Algo",
                     "keyAltName": "insuranceRecord1AltKey"
                   }
                 },
                 "insuranceRecord2": {
                   "encrypt": {
                     "algorithm": "insuranceRecord2Algo",
                     "keyAltName": "insuranceRecord2AltKey",
                     "contentionFactor": 5
                   }
                 }
               }
             }
           }
         }
       }

   21. encryption_master_key：包含加密主密钥的 Secret Manager Secret。
   22. encryption_key_vault：加密密钥保险柜值。
   23. 身份验证数据库：指定用于身份验证的 MongoDB 数据库的名称。
   24. （可选）点击 + 添加标签，以键值对的形式向连接添加标签。
   25. 点击下一步。
5. 在目标位置部分，输入您要连接的远程主机（后端系统）的详细信息。
   1. 目标类型：您可以将目标详细信息指定为主机地址，该地址可以是以下任意地址：
      • 单个 Mongo SRV 字符串。例如 mongodb+srv://cluster2.2f.mongodb.net。
      • 各个副本。例如 dasdsf.2f.mongodb01.net。
      • IP 地址。例如：10.23.123.12

      如果未指定 mongodb+srv，系统会在将连接字符串中的所有副本合并后，将 mongodb:// 前缀添加到最终网址。

      • 主机地址：指定目标的主机名或 IP 地址。

        如果您想与后端建立专用连接，请执行以下操作：

        • 创建 PSC 服务连接。
        • 创建端点连接然后在主机地址字段中输入端点连接的详细信息。
        注意：如果您想连接到在 Google Cloud 内的专用网络上运行的 MongoDB Atlas 集群，请参阅 Atlas 集群的专用连接。

      要输入其他目标，请点击 + 添加目标。

   2. 点击下一步。
6. 在身份验证部分中，输入身份验证详细信息。
   1. 选择身份验证类型，然后输入相关详情。

      MongoDB 连接支持以下身份验证类型：

      • 用户名和密码

   了解如何配置这些身份验证 请参阅配置身份验证。

   2. 点击下一步。
7. 查看：查看您的连接和身份验证详细信息。
8. 点击创建。

配置身份验证

根据您要使用的身份验证输入详细信息。

• 用户名和密码
  • 用户名：连接器的用户名
  • 密码：包含用户密码的 Secret Manager Secret。
  • 身份验证方案：用于身份验证的方案。

    MongoDB 连接支持以下身份验证方案：

    • 纯色
    • SCRAM-SHA-1
    • SCRAM-SHA-256

实体、操作和动作

所有集成连接器都会为所连接应用的对象提供抽象层。您只能通过此抽象访问应用的对象。抽象作为实体、操作和动作向您展示。

注意：您可以在连接器任务中查看连接器的实体、操作和动作。

• 实体：实体可以被视为连接的应用或服务中的对象或属性集合。不同连接器的实体定义也会有所不同。例如，在数据库连接器中，表是实体；在文件服务器连接器中，文件夹是实体；在消息传递系统连接器中，队列是实体。

  但是，连接器可能不支持或不支持任何实体，在这种情况下， “Entities”列表将为空。

• 操作：操作是指您可以对实体执行的操作。您可以对实体执行以下任一操作：
  • 列表
  • 获取
  • 创建
  • 更新
  • 删除

  从可用列表中选择一个实体，系统会生成该实体可用的操作列表。如需了解操作的详细说明，请参阅连接器任务的实体操作。不过，如果连接器不支持任何实体操作，则 Operations 列表中不会列出此类不受支持的操作。

• 动作：动作是可通过连接器接口提供给集成的头等函数。动作可让您对一个或多个实体进行更改，并且动作因连接器而异。通常，操作将具有一些输入参数和一个输出参数。但可能的情况是，连接器不支持任何动作，在这种情况下，Actions 列表将为空。

注意：所有实体和操作都具有与之关联的架构。例如，动作架构将包含参数详细信息，例如：参数名称及其相应的数据类型。实体和操作的架构（元数据）由连接位于 从后端提取代码如果架构有任何更新，此类更新不会自动反映在现有连接中；您必须手动刷新架构。如需刷新连接的架构，请打开连接的连接详情页面，然后点击刷新连接架构。

注意：MongoDB 连接器不支持任何实体操作。

系统限制

MongoDB 连接器每个节点每秒最多可处理 70 笔事务，并会对超出此限制的所有事务进行节流。默认情况下，Integration Connectors 会为连接分配 2 个节点（以提高可用性）。

如需了解适用于 Integration Connectors 的限制，请参阅限制。

注意：集成连接器节点的数量将根据您的使用情况进行动态扩缩。但是，如果您想为大量存储卷预留容量， 等待自动扩缩，您可以调整连接的最小节点值。连接处理越多事务就需要越多节点。相反，如果连接处理的事务较少，则需要的节点就越少。如需配置节点值，请执行以下操作：

• 如果您是随用随付客户，请在“修改关联”页面中配置节点的最小值和最大值。
• 如果您是订阅型客户，请与支持团队联系。

节点可处理的最大事务数取决于多种因素。因此，在调整节点数下限以提高吞吐量之前， 建议您检查后端系统是否设置得当，能够处理所需的流量。

支持的数据类型

以下是此连接器支持的数据类型：

• BIGINT
• BINARY
• BIT
• BOOLEAN
• CHAR
• DATE
• DECIMAL
• DOUBLE
• FLOAT
• INTEGER
• 长 VARCHAR
• LONG VARCHAR
• NCHAR
• NUMERIC
• NVARCHAR
• REAL
• SMALL INT
• 时间
• TIMESTAMP
• TINY INT
• VARBINARY
• VARCHAR

MongoDB Atlas 集群的配置

MongoDB Atlas 集群的身份验证配置与之前记录的步骤略有不同。如需对 Atlas 集群进行身份验证，您必须先获取 Atlas 连接字符串。如需获取 Atlas 连接字符串，请执行以下步骤：

1. 在“集群”视图中，点击要连接到的集群对应的“连接”。
2. 点击“连接您的应用”。
3. 选择任一驱动程序选项以显示连接字符串。

如需对 Atlas 集群进行身份验证，请使用以下配置：

• 身份验证数据库：将值设置为 admin，因为所有 MongoDB Atlas 用户都与 admin 数据库关联。
• 使用 SSL：将值设置为 true。
• 服务器：将值设置为 mongodb+srv://MongoDB INSTANCE SERVER NAME 而不包含用户名和密码。

操作

本部分列出了 MongoDB 连接支持的所有操作。

注意：所有操作的结果都将以 Connectors 任务的 connectorOutputPayload 中的 JSON 响应 响应参数。

AggregatePipeline 操作

此操作会将流水线更改汇总到一个集合中。

AggregatePipeline 操作的输入参数

参数名称	数据类型	必需	说明
集合	字符串	是	MongoDB 集合的名称。
管道	字符串	是	将字段阶段作为字符串列表包含的汇总流水线。
page_size	整数	否	结果集中每页中包含的项数。
page_no	整数	否	要从结果集中检索的网页的索引。索引从 0 开始。

如需了解如何配置 AggregatePipeline 操作，请参阅示例。

CountDocuments 操作

此操作会统计集合中满足指定条件的所有文档。

CountDocuments 操作的输入参数

参数名称	数据类型	必需	说明
集合	字符串	是	MongoDB 集合的名称。
过滤条件	字符串	否	以 MongoDB 查询格式表示的过滤条件。如果为 querytype 等式启用了加密架构，此条件可以包含加密字段。

CountDocuments 操作的输出参数

此操作返回满足指定条件的所有文档的数量。

如需查看有关如何配置 CountDocuments 操作的示例，请参阅示例。

DeleteDocuments 操作

此操作会删除集合中的文档。

DeleteDocuments 操作的输入参数

参数名称	数据类型	必需	说明
集合	字符串	是	MongoDB 集合的名称。
过滤条件	字符串	否	以 MongoDB 查询格式表示的过滤条件。此条件可包含 加密字段（如果为查询类型相等启用了加密架构）。

DeleteDocuments 操作的输出参数

该操作会返回已删除文档的数量。

如需查看有关如何配置 DeleteDocuments 操作的示例，请参阅示例。

DistinctValues 操作

此操作会返回集合中某个字段的唯一值。

DistinctValues 操作的输入参数

参数名称	数据类型	必需	说明
集合	字符串	是	MongoDB 集合的名称。
字段	字符串	是	用于查询不同值的字段名称。
过滤条件	字符串	否	以 MongoDB 查询格式表示的过滤条件。如果为 querytype 等式启用了加密架构，此条件可以包含加密字段。

如需查看有关如何配置 DistinctValues 操作的示例，请参阅示例。

InsertDocument 操作

此操作会在集合中插入文档。

下表介绍了 InsertDocument 操作的输入和输出参数。

InsertDocument 操作的输入参数

参数名称	数据类型	必需	说明
集合	字符串	是	MongoDB 集合的名称。
文档	字符串	否	要添加到 MongoDB 集合中的文档。

InsertDocument 操作的输出参数

此操作会返回插入的文档的 ID。

如需查看有关如何配置 InsertDocument 操作的示例，请参阅示例。

ListDocuments 操作

下表介绍了 ListDocuments 操作的输入和输出参数。

ListDocuments 操作的输入参数

参数名称	数据类型	必需	说明
集合	字符串	是	MongoDB 集合的名称。
过滤条件	字符串	否	以 MongoDB 查询格式表示的过滤条件。如果为 querytype 等式启用了加密架构，此条件可以包含加密字段。
page_size	整数	否	结果集中每页中包含的项数。
page_no	整数	否	要从结果集中检索的网页的索引。索引从 0 开始。
投影	字符串	否	要包含在查询投影中的字段或属性集，采用 Mongo 格式。
sort_by	字符串	否	使用 MongoDB 的二进制 JSON (BSON) 格式对查询结果进行排序的规范。

ListDocuments 操作的输出参数

该操作会根据页面大小返回满足过滤条件的文档列表。默认页面大小为 25，最大页面大小为 50,000。

如需了解如何配置 ListDocuments 操作，请参阅示例。

UpdateDocuments 操作

下表介绍了 UpdateDocuments 操作的输入和输出参数。

UpdateDocuments 操作的输入参数

参数名称	数据类型	必需	说明
集合	字符串	是	MongoDB 集合的名称。
值	字符串	否	采用 Mongo 格式要更新的值。
过滤条件	字符串	否	以 MongoDB 查询格式表示的过滤条件。这种情况会导致 包含加密字段（如果为查询类型相等启用了加密架构）。
upsert	布尔值	否	操作是更新/插入还是更新。

UpdateDocuments 操作的输出参数

该操作会返回已更新的文档数。

如需查看有关如何配置 UpdateDocuments 操作的示例，请参阅示例。

UpdateDocumentsWithEncryption 操作

通过此操作，用户可以更新加密值。下表介绍了 UpdateDocumentsWithEncryption 操作的输入和输出参数。

UpdateDocumentsWithEncryption 操作的输入参数

参数名称	数据类型	必需	说明
集合	字符串	是	MongoDB 集合的名称。
文档	字符串	否	包含要更新的值的文档。值可以包含将使用 CSFLE 加密的字段。
过滤条件	字符串	否	以 MongoDB 查询格式表示的过滤条件。这种情况会导致 包含加密字段（如果为 querytype 等式启用了加密架构）。
upsert	布尔值	否	指定操作是否为 upsert。

UpdateDocumentsWithEncryption 操作的输出参数

该操作会返回已更新的文档数量。

如需查看有关如何配置 UpdateDocumentsWithEncryption 操作的示例，请参阅示例。

示例

本部分介绍如何在此连接器中执行一些实体操作和动作。

示例 - 汇总流水线更改

1. 在 Configure connector task 对话框中，点击 Actions。
2. 选择 AggregatePipeline 操作，然后点击完成。
3. 在连接器任务的任务输入部分中，点击 connectorInputPayload，然后在 Default Value 字段中输入类似于以下内容的值：

   {
     "collection": "restaurants",
     "pipeline": {
       "stages": [
         "{$addFields: { \"new_menu_item\": \"tea\"}}"
       ]
     },
     "page_size": 1,
     "page_no": 0
   }

此示例会向 restaurant 集合中的所有文档添加一个新菜单项，并返回结果的第一页。

示例 - 统计文档数量

1. 在 Configure connector task 对话框中，点击 Actions。
2. 选择 CountDocuments 操作，然后点击完成。
3. 在连接器任务的任务输入部分，点击 connectorInputPayload，然后在 Default Value 字段：

   {
   "collection":"restaurants",
   "filter": "{\"name\": \"CarvelIceCream1\"}"
   }

此示例会返回与过滤条件匹配的文档数。如果 操作成功时，Connectors 任务的 connectorOutputPayload 响应参数的值将类似于 更改为以下代码：

{
  "results": [
   {
    "count": 5
   }
  ]
}

示例 - 删除文档

1. 在 Configure connector task 对话框中，点击 Actions。
2. 选择 DeleteDocuments 操作，然后点击完成。
3. 在连接器任务的任务输入部分，点击 connectorInputPayload，然后在 Default Value 字段中输入以下内容：

   {
     "collection": "Insurancedocuments",
     "filter": "{\"insurance.provider\":\"ABC\"}"}

此示例会删除保险提供商为 ABC 的所有文档。

示例 - 查找集合中不同的值

1. 在 Configure connector task 对话框中，点击 Actions。
2. 选择 DistinctValues 操作，然后点击完成。
3. 在连接器任务的任务输入部分，点击 connectorInputPayload，然后在 Default Value 字段：

   {"collection":"restaurants","field":"contact"}

此示例在 restaurants 集合中返回不同的值。如果操作成功，Connectors 任务的 connectorOutputPayload 响应参数的值将类似于以下内容：

{
 "results": [
  {
   "DistinctValues": [
    "3217902323",
    "8747479023",
    "3492619023"
   ]
  }
 ]
}

示例 - 插入文档

1. 在 Configure connector task 对话框中，点击 Actions。
2. 选择 InsertDocument 操作，然后点击完成。
3. 在连接器任务的任务输入部分，点击 connectorInputPayload，然后在 Default Value 字段：

   { {
   "collection": "Insurancedocuments",
   "document": "{\"fname\":\"firstName\",
   \"lname\":\"lastName\",
   \"passportId\":\"ABCD1234\",
   \"bloodType\":\"A\",
   \"medicalRecords\":[{\"item\":\"name1\"},{\"item\":\"name2\"}],
   \"insurance\":{\"policyNumber\":\"12345\",\"provider\":\"provider2\"}}"
   } }

此示例在 Insurancedocuments 集合中插入一个文档。 文档的内容在 document 字段中指定。如果 成功插入后，您会在 Connectors 任务的 connectorOutputPayload 响应参数。

示例 - 列出文档

1. 在 Configure connector task 对话框中，点击 Actions。
2. 选择 ListDocuments 操作，然后点击完成。
3. 在连接器任务的任务输入部分中，点击 connectorInputPayload，然后在 Default Value 字段中输入类似于以下内容的值：

   {
   "collection": "Insurancedocuments",
   "filter": "{\"insurance.provider\":\"ABC\"}",
   "page_size": 10
   }

此示例返回 Insurancedocuments 集合中的文档 其中保险提供商为ABC。结果集的页面大小 设置为 10，文件列表将 可在 Connectors 任务的 connectorOutputPayload 响应参数。

示例 - 更新文档

1. 在 Configure connector task 对话框中，点击 Actions。
2. 选择 UpdateDocuments 操作，然后点击完成。
3. 在连接器任务的任务输入部分中，点击 connectorInputPayload，然后在 Default Value 字段中输入类似于以下内容的值：

   {"collection":"Insurancedocuments",
   "values":" {$set: { lname:\"Smith\" }}",
   "filter":"{\"insurance.provider\":\"ABC\"}"}

此示例将匹配文档中的姓氏更新为 Smith 过滤条件。如果更新成功，您将获得更新的文档数量。回答将采用以下形式 Connectors 任务的 connectorOutputPayload 响应参数。

示例 - 更新加密文档

1. 在 Configure connector task 对话框中，点击 Actions。
2. 选择 UpdateDocumentsWithEncryption 操作，然后点击完成。
3. 在连接器任务的任务输入部分，点击 connectorInputPayload，然后在 Default Value 字段中输入以下内容：

   { {"collection":"Insurancedocuments",
   "document":" { \"insurance.provider\":\"XYZ\" }",
   "filter":"{\"insurance.provider\":\"ABC\"}"}

此示例将保险提供商更新为 XYZ 保险提供商为 ABC 的所有文件中。

使用 Terraform 创建连接

您可以使用 Terraform 资源创建新的连接。

如需了解如何应用或移除 Terraform 配置，请参阅基本 Terraform 命令。

如需查看用于创建连接的 Terraform 模板示例，请参阅模板示例。

使用 Terraform 创建此连接时，您必须在 Terraform 配置文件中设置以下变量：

参数名称	数据类型	必需	说明
数据库	STRING	True	MongoDB 数据库的名称。
timeout	INTEGER	错误	连接超时（以秒为单位）。
enable_ssl	BOOLEAN	错误	此字段用于设置是否已启用 SSL。
app_name	STRING	错误	MongoDB 的自定义应用名称。
max_staleness_seconds	INTEGER	错误	在客户端停止使用辅助实例执行读取操作之前，辅助实例过时的时间（以秒为单位）。
write_concern	STRING	错误	用于请求确认写入操作已传播到具有指定标记的指定数量实例的选项。
write_concern_timeout	INTEGER	错误	指定写入问题的时间限制（以毫秒为单位）。
write_concern_journal	BOOLEAN	错误	向 MongoDB 请求确认，确认写入操作已写入日志。
read_preference	ENUM	错误	读取此连接的偏好设置。支持的值包括：primary、primaryPreferred、secondary、secondaryPreferred、 Marketplace
cluster_type	ENUM	错误	指定 MongoDB 集群的类型。支持的值包括：REPLICA_SET、STANDALONE、SHARDED、UNKNOWN
enable_encryption	BOOLEAN	错误	此字段用于设置是否启用加密。
encryption_type	ENUM	错误	此字段用于设置启用的加密类型。支持的值包括：local
encryption_schema	STRING	错误	加密架构信息，包括所用的字段和加密算法。
encryption_master_key	SECRET	错误	包含加密主密钥的 Secret Manager Secret。
encryption_key_vault	STRING	错误	加密密钥保险柜值。
auth_database	STRING	True	用于身份验证的 MongoDB 数据库的名称。

在集成中使用 MongoDB 连接

创建连接后，该连接将在 Apigee Integration 和 Application Integration 中可用。您可以通过连接器任务在集成中使用该连接。

• 如需了解如何在 Apigee Integration 中创建和使用连接器任务，请参阅连接器任务。
• 如需了解如何在应用集成中创建和使用连接器任务，请参阅连接器任务。

向 Google Cloud 社区寻求帮助

您可以在 Google Cloud 中发布问题和讨论此连接器 Cloud 论坛。

后续步骤

• 了解如何暂停和恢复连接。
• 了解如何监控连接器使用情况。
• 了解如何查看连接器日志。