GridMix输入格式喜欢什么



i使用瘤头矿业工作文件,包含job-trace.json和job-topology.json。girdmix用法喜欢:

$HADOOP_HOME/bin/hadoop jar $HADOOP_HOME/share/hadoop/tools/lib/hadoop-gridmix-2.7.3.jar -libjars $HADOOP_HOME/share/hadoop/tools/lib/hadoop-rumen-2.7.3.jar -Dgridmix.compression-emulation.enable=false <iopath> <trace>

and,是指GridMix的工作目录,因此我要使用:file:///home/hadoop/input,是指从日志文件中提取的跟踪文件,使用file:///home/hadoop/rumen/job-trace-1hr.json

最后,遇到以下例外:

2019-03-07 16:37:12,495 ERROR [main] gridmix.Gridmix (Gridmix.java:start(534)) - Startup failed. java.io.IOException: Found no satisfactory file in file:/home//hadoop/input
2019-03-07 16:37:13,040 INFO  [main] util.ExitUtil (ExitUtil.java:terminate(124)) - Exiting with status 2
2019-03-07 16:37:13,041 INFO  [Thread-1] gridmix.Gridmix (Gridmix.java:run(657)) - Exiting...

那么此参数是什么样的,或如何使用?

有人可以有一些想法吗?

谢谢。

我发现这是我自己的不正确的useage;由于输入数据太小,我检查了GridMix参数的使用。

gridmix.min.file.size   |  The minimum size of the input files. The default limit is 128 MiB. Tweak this parameter if you see an error-message like "Found no satisfactory file" while testing GridMix with a relatively-small input data-set.

所以,我调整了较大的输入数据。使用 - 生成10克。

谢谢。

相关内容

  • 没有找到相关文章

最新更新