比较不同列的字符串长度的数据帧

时间:2016-09-29 04:35:01

标签: python pandas dataframe min string-length

我正在尝试获取不同列的字符串长度。看起来很简单:

df['a'].str.len()

但我需要将它应用于多个列。然后获得最低限度。

类似的东西:

df[['a','b','c']].str.len().min

我知道上面的内容不起作用,但希望你能得到这个想法。列abc都包含名称,我想检索最短的名称。

另外,由于数据庞大,我无法创建其他列以节省大小。

1 个答案:

答案 0 :(得分:4)

我认为您需要列表理解,因为string函数仅适用于Seriescolumn):

print ([df[col].str.len().min() for col in ['a','b','c']])

apply的另一种解决方案:

print ([df[col].apply(len).min() for col in ['a','b','c']])

样品:

df = pd.DataFrame({'a':['h','gg','yyy'],
                   'b':['st','dsws','sw'],
                   'c':['fffff','','rr'],
                   'd':[1,3,5]})

print (df)

     a     b      c  d
0    h    st  fffff  1
1   gg  dsws         3
2  yyy    sw     rr  5

print ([df[col].str.len().min() for col in ['a','b','c']])
[1, 2, 0]

<强>计时

#[3000 rows x 4 columns]
df = pd.concat([df]*1000).reset_index(drop=True)

In [17]: %timeit ([df[col].apply(len).min() for col in ['a','b','c']])
100 loops, best of 3: 2.63 ms per loop

In [18]: %timeit ([df[col].str.len().min() for col in ['a','b','c']])
The slowest run took 4.12 times longer than the fastest. This could mean that an intermediate result is being cached.
100 loops, best of 3: 2.88 ms per loop

<强>结论

apply速度更快,但不适用于None

df = pd.DataFrame({'a':['h','gg','yyy'],
                   'b':[None,'dsws','sw'],
                   'c':['fffff','','rr'],
                   'd':[1,3,5]})


print (df)
     a     b      c  d
0    h  None  fffff  1
1   gg  dsws         3
2  yyy    sw     rr  5

print ([df[col].apply(len).min() for col in ['a','b','c']])
  

TypeError:“NoneType”类型的对象没有len()

print ([df[col].str.len().min() for col in ['a','b','c']])
[1, 2.0, 0]

通过评论编辑:

#fail with None
print (df[['a','b','c']].applymap(len).min(axis=1))
0    1
1    0
2    2
dtype: int64
#working with None
print (df[['a','b','c']].apply(lambda x: x.str.len().min(), axis=1))
0    1
1    0
2    2
dtype: int64