由于每秒上限而限制和排队API请求

Question

我正在使用mikeal /
request
进行API调用。我最常使用的API之一（Shopify
API）。最近设置了新的通话限制，我看到类似以下错误：

Exceeded 6.0 calls per second for api client. Slow your requests or contact support for higher limits.

我已经进行了升级，但是无论获得多少带宽，我都必须考虑这一点。对Shopify
API的大部分请求都在async.map（）函数内，该函数循环异步请求并收集主体。

我正在寻找任何帮助，也许是一个已经存在的库，该库将环绕请求模块，并实际上阻止，睡眠，调节，分配，管理，同时触发的许多同时请求，并将它们限制为6在一个时间。如果没有这样的项目，我没有问题。我只是不知道如何处理这种情况，我希望有某种标准。

我用迈克（要求）订了票。

Answer 1

我遇到了各种API的同一问题。AWS也以节流而闻名。

可以使用两种方法。您提到了async.map（）函数。您是否尝试过async.queue（）？队列方法应允许您设置固定限制（如6），超过该限制的任何内容都将放入队列中。

另一个有用的工具是oibackoff。如果从服务器返回错误并再次尝试，该库将允许您回退请求。

包装两个库以确保覆盖了您的两个库，这很有用：async.queue确保您没有超出限制，而oibackoff确保如果服务器告诉您，可以再次获得请求有一个错误。