长API调用-异步调用答案？

Question

我正在调用一个外部API，这是缓慢的。目前，如果我已经调用API获取一些订单一段时间，调用可以分成页面（分页）。

因此，获取订单可能是进行多个调用，而不是1个调用。有时，每次呼叫可能是10秒左右，所以总共可能是一分钟左右，这太长了。

        GetOrdersCall getOrders = new GetOrdersCall();
        getOrders.DetailLevelList.Add(DetailLevelCodeType.ReturnSummary);
        getOrders.CreateTimeFrom = lastOrderDate;
        getOrders.CreateTimeTo = DateTime.Now;

        PaginationType paging = new PaginationType();
        paging.EntriesPerPage = 20;
        paging.PageNumber = 1;

        getOrders.Pagination = paging;

        getOrders.Execute();

        var response = getOrders.ApiResponse;
        OrderTypeCollection orders = new OrderTypeCollection();

        while (response != null && response.OrderArray.Count > 0)
        {
            eBayConverter.ConvertOrders(response.OrderArray, 1);

            if (response.HasMoreOrders)
            {
                getOrders.Pagination.PageNumber++;
                getOrders.Execute();

                response = getOrders.ApiResponse;
                orders.AddRange(response.OrderArray);
            }
        }

null

如果有人能给我指明正确的方向--那将不胜感激。

Answer 1

我想我可以将它设置为异步地触发多个调用，但我不确定如何检查所有任务何时已经完成，即准备提交给DB。

是的。你可以把这个拆散

问题是ebay没有异步任务执行方法，所以您只能阻止线程调用，并且没有IO优化的异步等待模式。如果有，您可以利用异步感知的TPL数据流管道（而且整个家庭玩起来很有趣），无论如何您都可以，尽管我提出了一个普通的TPL解决方案...

var concurrentBag = new ConcurrentBag<OrderType>();


// make first call
// add results to concurrentBag
// pass the pageCount to the for
int pagesize = ...;

Parallel.For(1, pagesize,
   page =>
      {
         // Set up
         // add page
         // make Call 

         foreach(var order in getOrders.ApiResponse)
            concurrentBag.Add(order);
      });

// all orders have been downloaded
// save to db

注意：您配置了MaxDegreeOfParallelism，可能将其设置为50，尽管您给它多少并不重要，但任务调度程序不会给您大量的线程，最初可能是10个左右，并且增长缓慢。

另一种方法是创建自己的任务计划程序，或者使用老式的Thread类旋转自己的线程

我在某个地方读到过，我希望避免将API调用和db写结合起来，以避免在SQL server中锁定--这是正确的吗？

null

额外资源

用于(Int32,Int32,ParallelOptions,Action）

执行for（Visual Basic中的for）循环，在该循环中，迭代可以并行运行，并且可以配置循环选项。

表示线程安全的、无序的对象集合。