在追加模式下使用多索引连接df

Question

好的，这是我的问题，我想使用multindexing，这样我就有了一个3-D的DF。我可以用

df = pd.concat([df1, df2], keys=('df1','df2'))

但是如何在DF上添加新的df3呢？本质上，我想在追加模式下的循环中添加一个新的df？我有几千个DF，在我连接它们之前存储所有的dfs不会很有效。有办法做到吗？

更具体地，让我们假设我有以下DF

df1 = pd.DataFrame(columns=['a', 'b', 'c'])
df2 = pd.DataFrame(columns=['a', 'b', 'c'])
df1.loc['index_1','b'] = 1
df1.loc['index_2','a'] = 2

df2.loc['index_7','a'] = 5
df3 = pd.DataFrame(columns=rating_matrix.columns)
df3.loc['index_9','c'] = 1

df = pd.concat([df1, df2], keys=('df1','df2'))


    a   b   c
df1     index_1     NaN     1   NaN
        index_2     2   NaN     NaN
df2     index_7     5   NaN     NaN

我能以类似的方式添加DF3吗？

Answer 1

因此，经过一段时间的搜索，我发现最好的方法是首先创建最终的df，重置它的索引，并设置最终的多索引。应该是这样的：

# create df's
df1 = pd.DataFrame(columns=['a', 'b', 'c'])
df2 = pd.DataFrame(columns=['a', 'b', 'c'])
df3 = pd.DataFrame(columns=['a', 'b', 'c'])

df1.loc['index_1','b'] = 1
df1.loc['index_2','a'] = 2
df2.loc['index_7','a'] = 5
df3.loc['index_9','c'] = 1

# add index in the form of a column
df1['df'] = 'df1' 
df2['df'] = 'df2'
df3['df'] = 'df3'

# reset index and set multiindex
df = pd.concat([df1, df2, df3], sort=True)
df.reset_index(inplace=True)
df.set_index(['df', 'index'], inplace=True)
df



                         a       b       c
df  index           
df1         index_1     NaN      1      NaN
            index_2      2      NaN     NaN
df2         index_7      5      NaN     NaN
df3         index_9     NaN     NaN      1