如何忽略字符串列表中只有1/2个字母的单词

Question

我有两个csv文件，dictionary.csv和news.csv，其中我匹配了news.csv中dictionary.csv中包含的单词。但是，很明显，即使我不应该，我也一直在找火柴。我不确定这是否是因为我的代码与每个字母或术语都匹配，有人能帮忙吗

以下是我的代码：

news=pd.read_csv("news.csv")
capitalizednews=news['STORY'].str.title() #to capitalize each first letter in news csv

dictionary=pd.read_csv("dictionary.csv")

capitalizeddict=dictionary['Lists'].str.title().str.replace(',','').str.replace('(','').str.replace(')','').str.replace('-','').str.replace('\d','')#to capitalize each first letter in dictionary and remove 

splitterm = capitalizeddict.str.split('\s+',expand=True).stack().unique().tolist()

pattern='|'.join(splitterm) #to join all of the terms in dictionary.csv


news["contain term"] =np.where(capitalizednews.str.contains(pattern,regex=True,case=False),1,0)

我的“包含术语”栏一直都是1

虽然，我一直有这样的感觉，因为我的一些术语在拆分后变成了1/2个字母的单词（比如p，Aa），所以我想忽略这些术语

Answer 1

忽略代码读取过程中可能出现的任何问题，这是一个通用函数，用于执行假设单词是标题中具有任意iterable的任意字符串（请注意，它返回一个列表）而列出的操作：

def weed_out_short_words(wordlist):
    wordlist2 = []
    for word in wordlist:
        if word.length <= 2:
            pass
        else:
            wordlist2.append(word)

这不会删除表中特定列包含两个或更少字母的单词的条目。它也不处理由多个单词组成的字符串，比如“Hello world”

此外，您的代码似乎混淆了任何给定事物所表示的内容。因为我不知道你的.csv的列是什么，我不能再帮你了