Pyspark Luigi多工人问题我想使用Luigi工作流在spark数据框中并行加载多个文件,并将它们存储在字典中。 加载所有文件后,我希望能够从main中的dictionary中访问这些数据帧,然后进行进一步处理。当我使用一个辅助 ...2024-10-03 已阅读: n次