如何检索ParlAI Mturk沙箱分配的结果


  • 我正在使用Mephisto在Mturk沙箱上运行ParlAI任务
  • 我正在使用";ParlAI聊天任务";代码,并遵循此处给出的说明
  • 我正在使用命令python run.py mephisto/architect=heroku mephisto.provider.requester_name=my_name_mturk_sandbox mephisto.blueprint.num_conversations=5从ParlAI repo目录ParlAI/parlai/crowdsourcing/tasks/chat_demo运行该任务
  • 我正在使用";Heroku";作为梅菲斯特的建筑师
  • 我可以在Mturk任务中通过聊天与两名不同的Mturk员工联系,完成聊天并提交调查
  • 但我无法检索用户通过Mturk HIT提交的聊天和调查结果

如何检索分配/任务的结果?

首先,您必须设置chat_data_folder参数。这是存储数据的路径。

要设置此参数,请将此部分添加到您的命令中:

mephisto.blueprint.chat_data_folder= 'give_a_path'

最新更新