使用 Azure 数据工厂为来自外部数据源的数据编制索引

6 分钟

在组织的搜索解决方案中，添加不在 Azure 中的外部数据是常见需求。 Azure AI 搜索非常灵活，因为它支持以多种方式创建数据并将其推送到索引中。

使用 Azure 数据工厂 (ADF) 将数据推送到搜索索引中

第一种方法是使用 ADF 将数据推送到索引的零代码选项。 ADF 可以连接到近 100 个不同的数据存储。通过 HTTP 和 REST 等连接器，可以连接无限数量的数据存储。这些数据存储在管道中用作源或目标（在复制活动中称为接收器）。

Azure AI 搜索索引连接器可用作复制活动中的接收器。

创建 ADF 管道以将数据推送到搜索索引

使用 ADF 管道将数据推送到搜索索引所需的步骤如下：

使用要在其中存储数据的所有字段创建 Azure AI 搜索索引。
使用复制数据步骤创建管道。
创建到数据所在位置的数据源连接。
创建接收器以连接到搜索索引。
将源数据中的字段映射到搜索索引。
运行管道以将数据推送到索引中。

例如，假设有在外部托管的 JSON 格式的客户数据。你想要将这些客户复制到搜索索引中。 JSON 采用以下格式：

{
  "_id": "5fed1b38309495de1bc4f653",
  "firstName": "Sims",
  "lastName": "Arnold",
  "isAlive": false,
  "age": 35,
  "address": {
    "streetAddress": "Sumner Place",
    "city": "Canoochee",
    "state": "Palau",
    "postalCode": 1558
  },
  "phoneNumbers": [
    {
      "type": "home",
      "number": "+1 (830) 465-2965"
    },
    {
      "type": "home",
      "number": "+1 (889) 439-3632"
    }
  ]
}

创建搜索索引

创建 Azure AI 搜索服务和索引来存储此信息。如果已完成创建 Azure AI 搜索解决方案模块，则已了解如何执行此操作。按照步骤创建搜索服务，但在导入数据时停止。将数据推送到索引时不需要创建索引器或技能集。

创建索引并添加以下字段和属性：

目前必须首先创建索引，因为 ADF 无法创建索引。

使用 ADF 复制数据工具创建管道

打开 Azure 数据工厂工作室，然后选择 Azure 订阅和数据工厂名称。

选择“引入”。
选择“下一步”。

注释

如果数据发生更改，并且需要使索引保持最新状态，可以选择调度管道。对于本例，你将导入一次数据。

创建源链接服务

在“源类型”中，选择“HTTP”。
在“连接”旁边，选择“+ 新建连接”。
在“新建连接”窗格的“名称”中输入“dataLocation”。
在“基 URL”中，输入 JSON 文件所在的位置，对于本例，输入 https://raw.githubusercontent.com/Azure-Samples/azure-sql-db-import-data/main/json/user1.json。
在“身份验证”类型中，选择“匿名”。
选择创建。
选择“下一步”。
在“文件格式”中，选择“JSON”。
选择“下一步”。