gpt4 book ai didi

c# - 如何在 Azure 搜索中的主记录下索引多个 blob?

转载 作者:行者123 更新时间:2023-12-03 05:42:07 26 4
gpt4 key购买 nike

我按照this tutorial中描述的步骤进行操作。我的情况有点不同:

  • 我不是为酒店和客房建立索引,而是为候选人和简历建立索引。
  • 我没有使用 CosmosDB,而是使用 Azure SQL 数据库。

按照本教程,我能够创建索引、2 个索引器(一个用于 SQL DB,一个用于 Blob 存储)和 2 个数据源。

SQL DB 包含我所有的候选人,存储包含他们所有的简历(PDF/DOC/DOCX 格式的文件)。每个 blob 都有一个元数据“ResumeCandidateId”,其中包含与候选者的“CandidateId”相同的值。

我的索引有以下字段:

    [SerializePropertyNamesAsCamelCase]
public partial class Candidate
{
[Key]
[IsFilterable, IsRetrievable(true), IsSearchable]
public string CandidateId { get; set; }

[IsFilterable, IsRetrievable(true), IsSearchable, IsSortable]
public string LastName { get; set; }

[IsFilterable, IsRetrievable(true), IsSearchable, IsSortable]
public string FirstName { get; set; }

[IsFilterable, IsRetrievable(true), IsSearchable, IsSortable]
public string Notes { get; set; }

public ResumeBlob[] ResumeBlobs { get; set; }
}

[SerializePropertyNamesAsCamelCase]
public class ResumeBlob
{
[IsRetrievable(true), IsSearchable]
[Analyzer(AnalyzerName.AsString.StandardLucene)]
public string content { get; set; }

[IsRetrievable(true)]
public string metadata_storage_content_type { get; set; }

public long metadata_storage_size { get; set; }

public DateTime metadata_storage_last_modified { get; set; }

public string metadata_storage_name { get; set; }

[Key]
[IsRetrievable(true)]
public string metadata_storage_path { get; set; }

[IsRetrievable(true)]
public string metadata_content_type { get; set; }

public string metadata_author { get; set; }

public DateTime metadata_creation_date { get; set; }

public DateTime metadata_last_modified { get; set; }

public string ResumeCandidateId { get; set; }
}

如您所见,一名候选人可以拥有多份简历。挑战是填充 ResumeBlobs 属性...

来自 SQL DB 的数据由索引器正确索引和映射。当我运行 Blob 索引器时,它会加载文档,但不会映射它们,并且它们永远不会出现在搜索中(ResumeBlobs 始终为空)。以下是用于创建 Blob 索引器的代码:

var blobDataSource = DataSource.AzureBlobStorage(
name: "azure-blob-test02",
storageConnectionString: "DefaultEndpointsProtocol=https;AccountName=yyy;AccountKey=xxx;EndpointSuffix=core.windows.net",
containerName: "2019");

await searchService.DataSources.CreateOrUpdateAsync(blobDataSource);

List<FieldMapping> map = new List<FieldMapping> {
new FieldMapping("ResumeCandidateId", "CandidateId")
};

Indexer blobIndexer = new Indexer(
name: "hotel-rooms-blobs-indexer",
dataSourceName: blobDataSource.Name,
targetIndexName: indexName,
fieldMappings: map,
//parameters: new IndexingParameters().SetBlobExtractionMode(BlobExtractionMode.ContentAndMetadata).IndexFileNameExtensions(".DOC", ".DOCX", ".PDF", ".HTML", ".HTM"),
schedule: new IndexingSchedule(TimeSpan.FromDays(1)));

bool exists = await searchService.Indexers.ExistsAsync(blobIndexer.Name);
if (exists)
{
await searchService.Indexers.ResetAsync(blobIndexer.Name);
}
await searchService.Indexers.CreateOrUpdateAsync(blobIndexer);

try
{
await searchService.Indexers.RunAsync(blobIndexer.Name);
}
catch (CloudException e) when (e.Response.StatusCode == (HttpStatusCode)429)
{
Console.WriteLine("Failed to run indexer: {0}", e.Response.Content);
}

我注释了 blobIndexer 的参数,但即使没有注释,我也会得到相同的结果。

当我运行搜索时,以下是我得到的示例:

{
"@odata.context": "https://yyy.search.windows.net/indexes('index-test01')/$metadata#docs(*)",
"value": [
{
"@search.score": 1.2127206,
"candidateId": "363933d1-7e81-4ed2-b82e-d7496d98db50",
"lastName": "LAMLAST",
"firstName": "ZFIRST",
"notes": "MGA ; SQL ; T-SQL",
"resumeBlobs": []
}
]
}

“resumeBlobs”为空。知道如何进行这样的映射吗?

最佳答案

据我所知,Azure 搜索不支持实现您的场景所必需的集合合并功能。

另一种方法是为简历创建一个单独的索引,并将简历索引器指向该索引。这意味着您的某些搜索场景将必须命中两个索引,但这是一条前进的道路。

关于c# - 如何在 Azure 搜索中的主记录下索引多个 blob?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/57902313/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com