c# - 尝试从第三方 api 同步数据

Question

这个问题之前可能已经被正确地问过，我很乐意接受指向正确位置的答案。问题是我不知道如何正确提问才能在搜索中返回任何内容。

我正在尝试从第 3 方 API (ADP) 提取数据并使用 asp.net core 将数据存储在我的数据库中。

我想获取从 API 返回的用户并将它们存储在我的数据库中，我在数据库中有一个 ADP 辅助表，其中包含来自 API 的大部分数据。

然后我想通过 API FROM 在我的数据库中更新或添加任何丢失或更改的记录。

我正在考虑使用对 api 的 ajax 调用来检索记录，然后将数据存储到另一个表并使用 sql 查找在两个表之间更改的记录并进行任何必要的更改(这将通过按钮手动激活)或某种预定的后台任务通过我的 c# 代码中的方法而不是 ajax 来执行此操作。

我的问题是:

1. 将此作为 sql 中的存储过程来执行此操作更合适，还是让我的网络应用程序中的方法执行数据转换更合适。
2. 我正在寻找遍历返回的数据并在我的数据库中更新/创建记录的任何示例。
3. 我只看到了模糊不清的例子，而不是我正在寻找的例子，而且没有关于实现这一目标的最佳方法的明确说明。如果我能找到任何引用资料或示例，我会很乐意进行研究，但我什至不知道从哪里开始，也不知道要搜索的正确术语。我研究了模型绑定(bind)、ajax 调用、json 序列化和反序列化。我可能想得太多了。

我将不胜感激任何建议或技术。感谢您提前抽出时间。

我的应用程序是使用 EF Core 在 asp.net core 2.2 中编写的

* 编辑 *

对于任何正在寻找的人 - https://learn.microsoft.com/en-us/dotnet/csharp/tutorials/console-webapiclient

这与 John Wu 的回答帮助我实现了我正在寻找的东西。

Answer 1

如果这是我的项目，我将按此顺序分解任务。

首先，启动一个空的控制台应用程序。

接下来，编写一个从 API 获取用户列表的方法。您根本没有告诉我们有关 API 的任何信息，因此这里是一个使用 HTTP 客户端的虚拟示例。

public async Task<List<User>> GetUsers()
{
    var client = new HttpClient();
    var response = await client.GetAsync("https://SomeApi.com/Users");
    var users = await ParseResponse(response);
    return users.ToList();
}

测试以上内容(例如，编写一些小代码来运行它并转储结果，或其他)以确保它独立工作。在继续之前，您需要确保它是坚固的。

接下来，创建一个与从 API 返回的数据对象的架构相匹配的临时表(或多个表)。现在您只想完全按照检索的方式存储它。

接下来，编写一些代码将记录插入表中。再次独立测试，并查看表中的数据以确保一切正常。它可能看起来有点像这样:

public async Task InsertUser(User user)
{
    using (var conn = new SqlConnection(Configuration.ConnectionString))
    {
        var cmd = new SqlCommand();
        //etc.
        await cmd.ExecuteNonQueryAsync();
    }
}

了解如何提取和存储数据后，您就可以完成从 API 中提取数据并插入的代码。它可能看起来有点像这样:

public async Task DoTheMigration()
{
    var users = await GetUsers();
    var tasks = users.Select
    (
        u => InsertUser(u)
    );
    await Task.WhenAll(tasks.ToArray());
}

作为最后一步，编写一系列存储过程或 DTS 包以将数据从临时表移动到它们的最终存放位置。如果您使用的是 MS Access，您可以编写一系列查询并使用一些 VBA 按顺序执行它们。在高层次上，它会:

1. 检查任何存在于临时表中但不存在于最终表中的记录，并将它们插入到最终表中。

2. 检查最终表中存在但不存在于临时表中的任何记录，并将其删除或将其标记为已删除。

3. 检查具有不同列值的任何共同记录并更新最终表。

当然，这些开发事件中的每一个都会提出自己的一组问题，您可以将这些问题连同详细信息发回 StackOverflow。因为您的问题不够具体，无法提供更深入的答案。