Het 'skeleton tracking'-systeem dat verantwoordelijk is voor de bewegingsherkenning is in staat om de positie van zes mensen bij te houden. De specificaties van het systeem onthullen echter dat de limiet voor hoeveel personen daarvan tegelijkertijd actief kunnen spelen op twee ligt.
Per actieve speler houdt het systeem de positie van twintig gewrichten bij en kan het die informatie als invoer gebruiken voor het laten bewegen van die speler zijn of haar Xbox Live Avatar.