Python中文
首页
教程
问答
标签
搜索
登录
注册
Cron日志显示sh:1:hdfs:未找到
回答此问题可获得
20
贡献值,回答如果被采纳可获得
50
分。
<p>我正在用python编写一个内务管理脚本,它将3天以前的文件存储到hdfs中,hdfs可以正常工作,但不能与cron一起工作</p> <p>这是我的密码</p> <pre><code>#storing the files from archive to hdfs within directory - tmp-Archive if os.system('hdfs dfs -test -e /user/hadoop/tmp-archive') == 0: print('Archive location exists...using current archive.') else: os.system('hdfs dfs -mkdir /user/hadoop/tmp-archive') print('Archive created -> /user/hadoop/tmp-archive') archive_file_list = os.listdir('/home/hadoop/PycharmProjects/Housekeeping-Script--master/Archive') for j in archive_file_list: #checks files within archive and stores it in hdfs archive_file_dir = '/home/hadoop/PycharmProjects/Housekeeping-Script--master/Archive/' + j os.system('hdfs dfs -put {} /user/hadoop/tmp-archive'.format(archive_file_dir)) print('Files added to HDFS in dir : /user/hadoop/tmp-archive') </code></pre> <p>crontab:</p> <pre><code>* * * * * python /home/hadoop/PycharmProjects/Housekeeping-Script--master/housekeeper.py > /home/hadoop/PycharmProjects/Housekeeping-Script--master/Logs/`date +\%d\%m\%Y\%H\%M`-cron.log 2>&1 </code></pre>
0 条评论
分类:
Python问答
请先
登录
后评论
默认排序
时间排序
1 个回答
匿名
1天前
擅长:python、mysql、java
<p>原因可能是HDFS的路径无法正确获取,请检查是否在cron文件的开头设置了路径</p>
请先
登录
后评论
针对此问题:
更多的回答
关注
89
关注
收藏
1
收藏,
216
浏览
网友 提问于 2天前
相关Python问题
如何将Python中的列表复制到给定的目标中?
10 回答
如何将python中的列表插入SQL表
4 回答
如何将python中的列表转换为numpy数组以放入十位
6 回答
如何将python中的列表输入javascript?
4 回答
如何将python中的列表返回给dag?
7 回答
如何将Python中的列表项重新排列成成对的元组/列表?
5 回答
如何将Python中的初始化对象序列化为XML?
3 回答
如何将python中的十进制字符串转换为数字?
3 回答
如何将Python中的原始输入文本转换为Tkinter中的标签?
7 回答
如何将python中的反斜杠命令转换为在Linux上运行
7 回答
如何将python中的命令行参数转换为字典?
9 回答
如何将python中的图像值传递到kivy中的kv文件?
6 回答
如何将Python中的图像数组(枕头对象)上传到Google云
2 回答
如何将Python中的图像编码为Base64?
1 回答
如何将python中的图像调整为灰度低分辨率,如MNIST时尚数据?
2 回答
如何将python中的多个html输出保存到单个文件(或多个)中?
10 回答
如何将Python中的多个ifelse语句重构为一个函数?
8 回答
如何将Python中的多处理与Django结合使用,从xml文件创建数千个模型实例?
6 回答
如何将python中的多级API响应转换为dataframe
3 回答
如何将python中的多线程编程模型转换为异步/等待模型?
4 回答