加入MultiIndex DataFrames创建空字段[pandas]

时间:2013-10-01 23:20:19

标签: python pandas

我正在尝试在两个字段''date_key'和'user_uuid'中加入pandas中的两个DataFrame,但是当我这样做时,我只得到一个空集,尽管在我搜索表匹配时存在重叠。

DataFrame one(icloset)看起来像:

In [167]: icloset.head()
Out[167]: 
                                           count     ASL75
date_key user_uuid                                            
20130917 000a26bf-e7ff-3124-9b00-b227ee155e7f     11   9.03510
         0017b444-83f7-3adb-9727-926de4041731      3  45.05510
         0022c69b-f1f5-301e-812d-89725e17c9dd     19  31.71980
         00453fcd-93bd-373e-9248-f821ce8279f2     10  17.68785
         004a050d-f855-3c9c-bfe0-5c504df965bc      8  45.20115

DataFrame two(definedRIDs)如下所示:

In [170]: definedRIDs.head()
Out[170]: 
     rid                             user_uuid rid_slots last48status bad_RID  \
0  48830  2eda12da-d613-3e1e-95de-de3c75a5f9ef         1  Fulfilling    False   
1  51025  a466303a-d66d-3db8-b640-c4d57d134404         1  Fulfilling    False   
2  51457  c41d87d3-8abc-328d-ae00-c63d7cf81ef2         1   Fulfilled    False   
3  48626  97ff5c81-e5df-30ac-9b7a-bda73fbf499f         1   Fulfilled    False   
4  51450  0ac72f09-0fb7-35ae-b8a2-ee6d131100b0         1   Fulfilled    False   

   date_key  
0  20130924  
1  20130927  
2  20130927  
3  20130923  
4  20130927 

我确保删除了definedRID的索引,使其看起来像文档中的this example

出于某种原因,当我尝试复制文档中的示例时,我在合并字段(count和ASL75)中得到空结果:

In [171]: definedRIDs.join(icloset,on=['date_key','user_uuid'])
Out[171]: 
<class 'pandas.core.frame.DataFrame'>
Int64Index: 7623 entries, 0 to 7622
Data columns (total 8 columns):
rid             7623  non-null values
user_uuid       7623  non-null values
rid_slots       7623  non-null values
last48status    7623  non-null values
bad_RID         7623  non-null values
date_key        7623  non-null values
count           0  non-null values
ASL75           0  non-null values
dtypes: bool(1), float64(2), object(5)

但是当我将数据帧导出到csv文件并手动搜索时,我在两个匹配的文件中都有user_uuid和date_key组合。关于为什么我在加入时遇到这种不匹配的想法?

谢谢

2 个答案:

答案 0 :(得分:3)

重置icloset DataFrame上的索引。当您指定on参数时,它会尝试匹配列,但date_key框架中没有user_uuidicloset列(因为它们位于索引中)所以找不到匹配。

definedRIDs.join(icloset.reset_index(),
                 on=['date_key','user_uuid'])

如果您使用的是on参数,则传入的值应为列名。

答案 1 :(得分:0)

看起来我只需要确保键上的类型都是dtype = object。

事实上,正确的解决方案是将没有索引(在左侧)的框架连接到右边有多索引的框架:

closet['date_key']=closet['date_key'].astype(str)
definedRIDS['date_key'] = definedRIDS['date_key'].astype(str)

icloset = closet.set_index(['date_key','user_uuid'])

RIDdata = definedRIDs.join(icloset,on=['date_key','user_uuid'],how='inner')

希望这有助于其他人不会在以后犯这个错误,并通过索引来澄清联接。