Hi中的数据验证

2024-04-25 08:35:15 发布

您现在位置:Python中文网/ 问答频道 /正文

在我们的应用程序中,我们将大量数据从teradata迁移到Hive。 需要验证源和之间的数据目标。我们正在计划使用python&pandas dataframe来实现它。 我的问题是

1.Will pandas data-frame can handle around 15 million of data ? 
2.Is there any other way to do it ? 

使用python实现上述目的的最佳方法是什么?在

提前谢谢


Tags: 数据应用程序目标dataframepandasdataframecan