Mechanical Turk：如何讓每個turker只做一次命中，同時允許多個turker做同樣的命中？

嗨，我是Mechanical Turk的新手。我有10K圖像，我想要問turkers爲Mechanical Turk中的每個圖像寫下一個簡短的摘要。由於我的圖像集中的所有圖像都是相似的，因此Turker在執行類似的摘要任務的時間超過10次時，他會在此任務中找到一些技巧並寫下類似的以下圖像摘要。Mechanical Turk：如何讓每個turker只做一次命中，同時允許多個turker做同樣的命中？

爲了增加多樣性和隨機性，我想要儘可能多的人來完成這項任務。完美的策略是，一個獨特的turker只允許標註一個圖像（或少於10張圖像），而一個圖像可以由多個turker概括。我的實驗旨在從不同的人收集不同的文本摘要，涵蓋豐富的詞彙集。

來源

2016-03-15 Jun

是的，這是可能的。根據文檔： http://docs.aws.amazon.com/AWSMechTurk/latest/AWSMechanicalTurkRequester/amt-dg.pdf（第4頁）

您可以指定任何工人可以接受你的HITs.You 可以設置兩種類型的限制的最大指派數目：

任何工人可爲您創建的特定HIT類型接受的最大分配數量
任何工人可以接受的所有HIT的最大分配數量，否則將具有HIT類型已經分配的電子專屬限制

來源

2016-04-13 03:24:59

如果我正確地理解了你，你總共有獨特的圖像標籤。這聽起來像是你希望每個任務（HIT）都要求一個工人標籤10個獨特的圖像。這將導致每個HIT帶有10個圖像的1K HIT。如果您希望只有一個獨特的工作人員爲每個圖像添加標籤，那麼您將設置要求的分配數量爲1.如果您希望多個工人在同一圖像上工作（例如，要確保質量，或只是爲了擴大您可能獲得的標籤的數量和類型），那麼您將爲每個任務（HIT）上希望工作的獨特工人數量設置請求數量。

如果我誤解了你想要做的事情，只需澄清一下，我會很樂意修改我的答案。

您可以瞭解更多關於這些概念和更多在這裏： http://docs.aws.amazon.com/AWSMechTurk/latest/RequesterUI/mechanical-turk-concepts.html

祝你好運！

來源

2016-03-27 20:01:13 jrb

感謝您的回覆！讓我澄清一點。假設我有10k張圖片需要總結 - 我會要求turkers寫一張每張圖片的簡短摘要。當Turker做了10次以上類似的任務時，他會在這個任務中發現一些技巧，並且寫下類似的下面圖像的摘要。爲了增加多樣性和隨機性，我會讓儘可能多的人來完成任務。完美的策略是，一個獨特的turker只允許彙總一個圖像，而一個圖像可以被多個turker概括。 – Jun

在這種情況下，您將擁有10K個HIT（一個HIT =一個人工智能任務=一個圖像），您將決定要在單個圖像上處理多少個工人（在MTurk中稱爲Assignments）。你說你想要「儘可能多的人」，這意味着你可以請求大量的作業。請記住，您的成本是分配數量* HIT數量。希望有所幫助！ – jrb

Mechanical Turk：如何讓每個turker只做一次命中，同時允許多個turker做同樣的命中？

回答

相關問題