在Hadoop上执行Python脚本遇到的坑 我踩过啦,你就别踩啦

首先我的Python脚本是单词统计的程序


mapper.py

在Hadoop上执行Python脚本遇到的坑 我踩过啦,你就别踩啦

reducer.py

在Hadoop上执行Python脚本遇到的坑 我踩过啦,你就别踩啦


执行方式: 本地文件 需要加 -files 参数,多个文件用逗号分隔

在Hadoop上执行Python脚本遇到的坑 我踩过啦,你就别踩啦

执行方式:hdfs文件

在Hadoop上执行Python脚本遇到的坑 我踩过啦,你就别踩啦

最后执行成功,文件如下

在Hadoop上执行Python脚本遇到的坑 我踩过啦,你就别踩啦


分享到:


相關文章: