哪个是有效的，使用sql联接查询或使用pandas合并查询？

Question

我想使用中的多个表中的数据pandas dataframe。我有两种从服务器下载数据的想法，一种方法是SQL使用联接和检索数据，一种方法是分别下载数据帧并使用pandas.merge合并它们。

当我想将数据下载到pandas。

query='''SELECT table1.c1, table2.c2
    FROM table1
    INNER JOIN table2 ON table1.ID=table2.ID where condidtion;'''
df = pd.read_sql(query,engine)

熊猫合并

df1 = pd.read_sql('select c1 from table1 where condition;',engine)
df2 = pd.read_sql('select c2 from table2 where condition;',engine)
df = pd.merge(df1,df2,on='ID', how='inner')

哪一个更快？假设我要对2个以上的表和2个列执行此操作。有什么更好的主意吗？如果有必要知道我使用PostgreSQL。

Answer 1

前者比后者快。前者仅需对数据库进行一次调用，并返回已加入并已过滤的结果。但是，后者对数据库进行两次调用，然后将结果集合并到应用程序/程序中。