使用RDS代理对AWS Lambda上的http服务器进行负载测试时，RDS连接过多

Question

我正在托管一个由gorilla/mux实现的web服务器，它为用户访问数据库提供APIendpoint。

我将服务器置于AWS Lambda函数中，并使用API网关向服务器发送Lambda代理请求。请求流为：

• API网关-

import (
    "github.com/gorilla/mux"
    "github.com/aws/aws-lambda-go/events"
    "github.com/aws/aws-lambda-go/lambda"
    "github.com/awslabs/aws-lambda-go-api-proxy/core"
    "github.com/awslabs/aws-lambda-go-api-proxy/gorillamux"
)

var (
    muxLambda *gorillamux.GorillaMuxAdapter
    router = mux.NewRouter().StrictSlash(true)
    // Register handler functions
)

func init() {
    muxLambda = gorillamux.New(router)
}

func LambdaHandler(
    ctx context.Context,
    req events.APIGatewayProxyRequest,
) (*core.SwitchableAPIGatewayResponse, error) {
    response, err := muxLambda.ProxyWithContext(ctx, *core.NewSwitchableAPIGatewayRequestV1(&req))
    if err != nil {
        panic(fmt.Sprintf("Proxy encountered an error: %s", err.Error()))
    }
    return response, nil
}

func main() {
    lambda.Start(LambdaHandler)
}

< li >我通过以下方式打开与数据库的连接:

import "database/sql"
database, err := sql.Open("postgres", connStr)

在测试这个服务器的负载性能的同时（si借-c 250-d 0.5-r 10'超文本传输协议：//

造成这种情况的可能原因是什么？

从我的搜索中，我发现也许这是由于：

• 对于每个请求，一个新的Lambda实例将启动并打开到RDS代理的新数据库连接。由于已经有太多的连接，不知怎的，Lambda会等待并在30秒后返回超时

这可能类似于这个问题，但我认为RDS代理可以为我处理连接池。还是我让RDS代理超载了？

如果原因是过载，我可以在AWS设置中做什么配置？扩展RDS实例？或者增加本文中提到的< code>max_connections设置？

或者只是更改此 SO 问题或此 SO 问题中提到的代码结构？

感谢您阅读本文。欢迎任何反馈。

< Li > RDS实例的数据库连接 < Li > RDS代理的CloudWatch指标

Answer 1

我发现Lambda超时的原因可能是由于RDS连接太多的事实。因此，RDS代理队列或限制来自Lambda的传入连接（参考）。

根本原因是因为太多的SQL查询从API服务器发送到RDS，这阻碍了连接。在我的例子中，查询包括2个步骤:

1. 获取 id 列表
2. 为每个 id 发送查询，例如：

select row from table where id = 1;

在这个设置中，如果列表中有200个id，那么API服务器将总共发送200个1查询，这将保持连接。

• 我修改了API服务器以发送单个查询，例如：

select row from table where id in (1, 2, 3, ....);

• 关闭＜code＞Db中的行。查询（来自数据库/sql）调用以避免连接泄漏：

rows, err := Db.Query(query, params)
defer rows.Close()

总之，这是由于对database/sqlgo包和sql的理解不足。希望这能帮助那些遇到这种情况的人。

Answer 2

增加max_connections的值不是最佳实践。我认为，更好的方法是使用Lambda函数初始化阶段来预先配置RDS连接。这个连接将被几个lambda函数重用。这个解决方案减少了到RDS数据库的连接数量。如何做到这一点有很好的例子。