Amazon Mechanical Turk Command Line Tools 使い方&Tips

ダウンロード

https://requester.mturk.com/developer/tools/clt

中に様々なシェルスクリプトとget stated htmlが入っている。

初期設定

AWSからアクセスキーとシークレットキーを取得

[Command Line Tools Installation Directory]/bin/mturk.properties を設定(httpsに注意）

MTURK_CMD_HOMEを絶対パスで指定
binディレクトリから実行。（sampleディレクトリに色々サンプルがある）

例えば大量のWorkerに対して自動でqualificationをassignするときなど便利。
http://mturk.s3.amazonaws.com/CLT_Tutorial/UserGuide.html#assignqual
Create a Qualification Type:
http://docs.aws.amazon.com/AWSMechTurk/latest/AWSMturkCLT/CLTReference_CreateQualificationTypeCommand.html
Assigning Qualification:
http://docs.aws.amazon.com/AWSMechTurk/latest/AWSMturkCLT/CLTReference_AssignQualificationCommand.html
Properties File Format:
http://docs.aws.amazon.com/AWSMechTurk/latest/AWSMturkCLT/CLTFilesArticle.html

e.g.
for qualifying new turkers
./assignQualification.sh -qualtypeid XXXXXXXXX -scorefile ../sample.score.tsv (tsv needs two columns workerid and score)
for updating (existing qualified) turkers
./updateQualificationScore.sh -qualtypeid YYYYYYYY -input ../sample.score.tsv (note using -input.)

python cli

https://blog.mturk.com/tutorial-a-beginners-guide-to-crowdsourcing-ml-training-data-with-python-and-mturk-d8df4bdf2977

画像埋め込み

tinypicsを使う or base64埋め込みも可能?

toggle button

formではなく、

<a href="javascript:toggle();" id="displaytext" style="font-size: 90%;">(<b>hide / show examples</b>)</a>

のようにする。（submit buttonが使えない可能性がある。）