ヒューマンコンピュテーションの品質管理

摘要

計算機単独では解くことが困難な問題を人間の能力と組み合わせることで解決するヒューマンコンピュテーションのアプローチがさまざまな分野で成功を収めつつある[Law 11].ヒューマンコンピュテーションでは，目的をもったゲーム（games with a purpose：GWAP）やクラウドソーシング（crowdsourcing）を用いて，計算機プログラムにおける関数呼出しのような形で，人間に仕事を依頼して結果を受け取り，それをさらに大きな計算過程の一部として活用する.一方，ヒューマンコンピュテーションは人間を構成要素として含むため，従来の機械単独での計算に比べて，その計算品質における不確実性が大きくなる.例えば，通常の関数呼出しであれば，同じ入力を与えれば同じ出力が得られることが期待されるが，人間に仕事を依頼する場合，たとえ同じ人に同じ仕事を依頼したとしても，異なる結果が得られることは珍しくない.なお，本稿で述べる「計算」は，通常の意味での計算に限らず，画像を分類することや，自然言語文にタグ付けすることなど，人間に依頼する情報処理タスクー般を意味する.