我有15个领域的rdd。为了做一些计算,我必须把它转换成熊猫数据帧。在
我试过了东方达()功能不起作用。我试着提取每个rdd,并用一个空格将其分隔开,然后放入一个数据帧中,这也没用。在
[u'2015-07-22T09:00:28.019143Z ssh 123.242.248.130:54635 10.0.6.158:80 0.000022 0.026109 0.00002 200 200 0 699 "GET https://google.coml HTTP/1.1" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/43.0.2357.130 Safari/537.36" ECDE-PAM TLSv1.2',
u'2015-07-22T09:00:27.894580Z ssh 203.91.211.44:51402 10.0.4.150:80 0.000024 0.15334 0.000026 200 200 0 1497 "GET https://yahoo.com HTTP/1.1" "Mozilla/5.0 (Windows NT 6.1; rv:39.0) Gecko/20100101 Firefox/39.0" ECDL-RAT TLSv1.2']
有什么功能我可以用吗?在
提前谢谢!!在
如果您有以下形式的rdd:
然后
rdd.toDF(['column1_name', 'column2_name', ...., 'column15_name']).toPandas()
将完成这项工作(但需要安装pandas
python包)。在相关问题 更多 >
编程相关推荐