java在HDFS上存储WEKA jar文件并从mapreduce调用WEKA方法

Question

我们能储存weka吗。然后从mapper和reducer类调用它的方法

假设我在一个文件中存储了大量实例，我想使用WEKA对它们进行集群。我可以读取这些实例，然后从map reduce程序调用weka的SVM方法吗

Answer 1

您不必手动将其存储在HDFS上。相反，当您运行作业时，可以使用-libjars jar1、jar2。。。选项，以便将所需的jar自动分发给所有映射器，并将这些jar自动包含在所有映射器的类路径中

另一个选项（尽管第一个代表标准）是在hadoop安装的lib dir中包含WEKA jar