c# - 调用许多网络服务的最佳方式？

Question

我有 30 个子公司，每个子公司都实现了他们的网络服务(使用不同的技术)。

我需要实现一个 web 服务来聚合它们，例如，所有子公司的 web 服务都有一个名为 GetUserPoint(int nationalCode) 的 web 方法，我需要实现我的 web 服务将调用所有这些并收集所有响应(例如积分总和)。

这是我的基类:

public abstract class BaseClass
{ // all same attributes and methods
  public long GetPoint(int nationalCode);
}

对于每个子公司的 Web 服务，我都实现了一个继承该基类的类，并定义了自己的 GetPoint 方法。

public class Company1
{
  //implement own GetPoint method (call a web service).
}

到

public class CompanyN
{
  //implement own GetPoint method (call a web service).
}

所以，这是我的网络方法:

        [WebMethod]
        public long MyCollector(string nationalCode)
        {

           BaseClass[] Clients = new BaseClass[]  { new Company1(),//... ,new Company1()}

           long Result = 0;
           foreach (var item in Clients)
           {
                long ResultTemp = item.GetPoint(nationalCode);
                Result += ResultTemp;
           }
       return Result;
       }

好的，它可以工作，但是太慢了，因为每个子公司的 Web 服务都托管在不同的服务器上(在 Internet 上)。

我可以像这样使用并行编程:(这叫并行编程吗!？)

    foreach (var item in Clients)
    {
                    Tasks.Add(Task.Run(() =>
                        {
                        Result.AddRange(item.GetPoint(MasterLogId, mobileNumber));                  
                    }
      }

我认为并行编程(和线程)不适合这个解决方案，因为我的解决方案受 IO 限制(不是 CPU 密集型)!

调用每个外部网络服务都很慢，对吗？许多线程等待响应!

我认为异步编程是最好的方式，但我是异步编程和并行编程的新手。

什么是最好的方法？ (parallel.foreach - 异步 TAP - 异步 APM - 异步 EAP - 线程)

请给我写一个例子。

Answer 1

看到完成作业的人令人耳目一新。

首先，从 .NET 4 开始(今天仍然如此)TAP 是 .NET 中异步工作流的首选技术。任务很容易组合，如果它们提供真正的 Task<T>，那么并行化 Web 服务调用将变得轻而易举。 - 返回 API。现在你已经用Task.Run“伪造”了它，暂时这可能足以满足您的目的。当然，您的线程池线程会花费大量时间进行阻塞，但如果服务器负载不是很高，即使这不是理想的做法，您也可以很好地摆脱它。

您只需要修复代码中的潜在竞争条件(最后会详细介绍)。

不过，如果您想遵循最佳实践，则可以使用真正的 TAP。如果您的 API 提供 Task -开箱即用的返回方法，这很容易。如果不是，则游戏还没有结束，因为 APM 和 EAP 可以轻松转换为 TAP。 MSDN 引用:https://msdn.microsoft.com/en-us/library/hh873178(v=vs.110).aspx

我还将在此处包含一些转换示例。

APM(取自另一个 SO 问题):

MessageQueue不提供 ReceiveAsync方法，但我们可以通过Task.Factory.FromAsync让它玩球:

public static Task<Message> ReceiveAsync(this MessageQueue messageQueue)
{
    return Task.Factory.FromAsync(messageQueue.BeginReceive(), messageQueue.EndPeek);
}

...

Message message = await messageQueue.ReceiveAsync().ConfigureAwait(false);

如果您的网络服务代理有 BeginXXX/EndXXX方法，这是要走的路。

EAP

假设您有一个源自 SoapHttpClientProtocol 的旧 Web 服务代理，只有基于事件的异步方法。您可以按如下方式将它们转换为 TAP:

public Task<long> GetPointAsyncTask(this PointWebService webService, int nationalCode)
{
    TaskCompletionSource<long> tcs = new TaskCompletionSource<long>();

    webService.GetPointAsyncCompleted += (s, e) =>
    {
        if (e.Cancelled)
        {
            tcs.SetCanceled();
        }
        else if (e.Error != null)
        {
            tcs.SetException(e.Error);
        }
        else
        {
            tcs.SetResult(e.Result);
        }
    };

    webService.GetPointAsync(nationalCode);

    return tcs.Task;
}

...

using (PointWebService service = new PointWebService())
{
    long point = await service.GetPointAsyncTask(123).ConfigureAwait(false);
}

在汇总结果时避免竞争

关于聚合并行结果，您的 TAP 循环代码几乎是正确的，但您需要避免在 Task 中改变共享状态机构，因为它们可能会并行执行。共享状态为 Result在你的情况下 - 这是某种集合。如果这个集合不是线程安全的(即，如果它是一个简单的 List<long> )，那么你有一个竞争条件，你可能会在 Add 上得到异常和/或丢失结果。 (我假设您代码中的 AddRange 是错字，但如果不是 - 上述内容仍然适用)。

修复比赛的简单异步友好重写如下所示:

List<Task<long>> tasks = new List<Task<long>>();

foreach (BaseClass item in Clients) {
    tasks.Add(item.GetPointAsync(MasterLogId, mobileNumber));                  
}

long[] results = await Task.WhenAll(tasks).ConfigureAwait(false);

如果您决定偷懒并坚持使用 Task.Run现在的解决方案，更正后的版本将如下所示:

List<Task<long>> tasks = new List<Task<long>>();

foreach (BaseClass item in Clients)
{
    Task<long> dodgyThreadPoolTask = Task.Run(
        () => item.GetPoint(MasterLogId, mobileNumber)
    );

    tasks.Add(dodgyThreadPoolTask);                  
}

long[] results = await Task.WhenAll(tasks).ConfigureAwait(false);