ESPゲーム

ログインするとすぐに、ユーザーは自動的にランダムなパートナーとマッチングする。パートナー同士はお互いを特定の誰かであると識別することはできず、またコミュニケーションを取ることもできない。マッチングが行われるとすぐに、彼らにはともに同じ画像が表示される。両者に課せられるタスクは、その画像に対して適切なラベルとなる単語について合意することである。ユーザーが（入力可能な）単語を入力すると、その単語をパートナーも入力していたのならば、その単語は合意したとみなされる（同時である必要はない）。そして、その単語はその画像に対するラベルとなる。両者には15枚の画像をラベリングするために2分半の時間が与えられている[2]。

両者には「パス」するという選択肢がある。「パス」はその画像についてギブアップするということである。パートナーが「パス」を行うと、2人組のもう片方のユーザーには、パートナーが「パス」を望んでいるというメッセージが表示される。両者が「パス」を選択すると、新しい画像が表示される[2]。

画像の中には「タブーワード」を持つものがある。「タブーワード」は有効なラベルとして入力できない単語である。これらの単語は通常、問題の画像に対して関係した単語であり、その画像に対してすでにラベリングが行われている普遍的な単語をユーザーに入力させないことで、ゲームを難しくしている。「タブーワード」はゲームによって生成される。例えば、ある画像が初めてゲームで用いられるとき、その画像は「タブーワード」を持っていない。しかし、その画像が再びゲームに現れるとき、画像は1回目のユーザーらによって合意された単語を「タブーワード」として持つことになる。また再度その画像がゲームに現れるとき。その画像は2つの「タブーワード」を持つことになる。このように、一度ある画像について十分な回数同じ単語がラベリングされると、その画像が多様なラベルを獲得することができるように、その単語は「タブーワード」となる。つまり、「タブーワード」はゲームシステムによって自動的に設定されるのである[2]。

ときどき、ユーザーはゲームを（人間のパートナー無しで）1人だけでプレイすることがある。この場合は、ESPゲーム自身がパートナーとなり、すでに画像に付与されているラベルを、相方である人間のプレイヤーに対して提供する（それらのラベルは以前のゲームで実際の人間が付与したものである）。この仕組みはゲームを遊んでいるプレイヤーの人数が奇数である際に必要となる[3]。

2008年の終わりには、このゲームはGWAP(Game with a purpose) として、新しいユーザーインターフェースとともに再ブランドされた。ルイス・フォン・アンが手掛けていた "Peekaboom" や "Phetch" といった他のゲームもこのタイミングで提供終了となった。

ルイス・フォン・アンは、プレイヤーがこのゲームを「チート」し、誤ったデータをシステムに注入してしまうことを防ぐ対抗手段について説明している。ときどき、プレイヤーらにすでに普遍的なラベルが明らかになっているテスト画像を与えることで、そのプレイヤーらが誠実に解答を行っているかをチェックすることができる。その場合、そのプレイヤーらの回答はそのテスト画像を正しくラベリングできた場合に限り利用されることになる。さらに、ラベルは一定数のプレイヤーが合意した後にのみ画像に付与される[4]。

ESPゲームはパートナーとの合意を促すために、「明らかな」ラベルを入力することを推奨する。しかし、このようなラベルは、適切な言語モデルを用いて既に存在するラベルから予測できることが多いため、それゆえに、そのようなラベルはシステムにほとんど情報を追加しない。Microsoft Researchのプロジェクトでは次に追加されるラベルに確率を割り当てる。このモデルは、画像を見ずにESPゲームをプレイするような不正プログラムなどに利用される[5]。