python:从配置单元表中检索数据。hivecontext无法正常工作

2024-09-24 20:31:32 发布

您现在位置:Python中文网/ 问答频道 /正文

我的python脚本通过以下方式从配置单元表获取数据:

conf = SparkConf().setAppName("myapp")
sc = SparkContext(conf=conf)
sqlContext = HiveContext(sc)
textsql = "SELECT * from hivetable"
result = sqlContext.sql(textsql)

发生了一件非常奇怪的事情:启动到HUE中的同一个查询给了我正确的结果,但是从.py脚本中它给了我错误的行。。。 我将textsql打印出来,这样我就可以肯定地说,我在HUE和python中使用了相同的查询

我的问题是返回的行数,python返回的行数较少

如何解决这个问题


Tags: from脚本conf方式selecthuemyapp单元