减少字符串中的单词数量

Question

我使用一个简单的函数来过滤所有长度为＆lt;因此我写了以下函数。

def my_tokenizer(tokens):
 tokens = [t for t in tokens if len(t) > 3]
 return tokens

x = my_tokenizer("sdfgds hj")
print x

然而，

X给了我一个空数组。关于我哪里出错的任何想法？

Answer 1

你将＆＃34;令牌＆＃34;，一个字符串视为序列，因此它将循环遍历每个字符。字符串方法split()将在空白字符（单词）上分隔字符串。所以试试：

tokens = [t for t in tokens.split() if len(t) > 3]