从pandas数据框架中删除带有空列表的行

2024-06-01 08:16:52 发布

您现在位置:Python中文网/ 问答频道 /正文

我有一个数据框,其中一些列有空列表,另一些列有字符串列表:

       donation_orgs                              donation_context
0            []                                           []
1   [the research of Dr. ...]   [In lieu of flowers , memorial donations ...]

我试图返回一个没有任何行的数据集,其中有空列表。

我试过检查空值:

dfnotnull = df[df.donation_orgs != []]
dfnotnull

以及

dfnotnull = df[df.notnull().any(axis=1)]
pd.options.display.max_rows=500
dfnotnull

我尝试了循环并检查存在的值,但我认为列表并没有返回Null,也没有像我想象的那样返回任何值:

dfnotnull = pd.DataFrame(columns=('donation_orgs', 'donation_context'))
for i in range(0,len(df)):
    if df['donation_orgs'].iloc(i):
        dfnotnull.loc[i] = df.iloc[i]

以上三种方法只返回原始数据帧中的每一行


Tags: ofthe数据字符串indf列表context
3条回答

您可以尝试将数据帧视为字符串而不是列表进行切片:

import pandas as pd
df = pd.DataFrame({
'donation_orgs' : [[], ['the research of Dr.']],
'donation_context': [[], ['In lieu of flowers , memorial donations']]})

df[df.astype(str)['donation_orgs'] != '[]']

Out[9]: 
                            donation_context          donation_orgs
1  [In lieu of flowers , memorial donations]  [the research of Dr.]

您可以使用以下一行:

df[(df['donation_orgs'].str.len() != 0) | (df['donation_context'].str.len() != 0)]

要避免转换为str并实际使用lists,可以执行以下操作:

df[df['donation_orgs'].map(lambda d: len(d)) > 0]

它将donation_orgs列映射到每行的列表的长度,并且只保留至少有一个元素的列表,过滤掉空列表。

它又回来了

Out[1]: 
                            donation_context          donation_orgs
1  [In lieu of flowers , memorial donations]  [the research of Dr.]

如预期。

相关问题 更多 >