Apache Beam Python程序写0kb文件?

2024-10-04 11:25:10 发布

您现在位置:Python中文网/ 问答频道 /正文

我有一个用python编写的apachebeam程序,它基本上读取一个输入文件,处理一些输入并将输出过滤到不同的taggedoutput,然后将这些输出写入不同的文件。你知道吗

现在,由于任何原因,这些不同的taggedoutput可以为空,并且当脚本将这些tagge输出写入文件时,文件的大小为0kb。你知道吗

So my questions is,
1. What can I avoid creating 0kb files if taggedoutput is empty? 
2. If is good ETL concept not to create 0kb files if taggedoutput is empty. 

一些工作的朋友认为创建0kb文件不是最佳的ETL实践。你知道吗


Tags: 文件程序脚本ifsoismyetl