La technologie Kinect® utilise un projecteur infrarouge (IR) associé à deux caméras pour cartographier un espace en trois dimensions. La technologie est capable de reconnaître les contours humains, puis d’extrapoler la profondeur en examinant la lumière émise par le projecteur IR. Un squelette filaire est attribué à chaque contour humain, qui est ensuite utilisé pour interpréter les mouvements comme des entrées de jeu. Chaque Kinect® est capable de reconnaître plusieurs personnes à la fois dans le cadre d’un jeu multijoueur. En plus de cette technologie Kinect® de détection de mouvement, chaque appareil comprend également un réseau de microphones qui peut être utilisé pour donner des commandes vocales.
Le Kinect® est un périphérique de jeu vidéo à détection de mouvement qui ne nécessite pas que chaque joueur tienne une manette physique. Contrairement à d’autres périphériques de jeux vidéo basés sur une caméra, la technologie Kinect® est capable de détecter avec précision la profondeur et d’effectuer plusieurs autres fonctions. La façon dont ces appareils détectent la profondeur consiste à projeter un champ semi-aléatoire de lumière infrarouge dans une pièce. Lorsque les points lumineux frappent un objet, la technologie Kinect® est capable de déterminer à quelle distance il se trouve en calculant combien de temps il faut à la lumière pour se refléter vers l’appareil. Cela permet de créer une carte de profondeur avec une précision d’environ 1 centimètre (environ 0.4 pouces).
Tous les calculs nécessaires à la création d’une carte de profondeur sont effectués par le Kinect® lui-même. Ces informations sont ensuite envoyées à la console de jeu avec un flux vidéo régulier de la caméra traditionnelle. Ces deux images vidéo sont transmises à 30 images par seconde (FPS). La console peut ensuite utiliser la carte de profondeur pour suivre la position d’une personne en trois dimensions et le flux vidéo régulier pour la reconnaissance faciale. Les joueurs peuvent apprendre au système à quoi ressemblent leurs visages, après quoi il est possible pour la technologie Kinect® de les connecter automatiquement.
En plus de cette technologie de détection de mouvement, chaque appareil Kinect® comprend également un réseau de microphones. Le réseau est composé de quatre microphones, ce qui permet à la technologie Kinect® de reconnaître la source de chaque son dans une pièce. Cela peut être utile pour les commandes vocales, car cela permet à l’appareil de déterminer quelle personne a parlé. Il peut également permettre à l’appareil de faire la différence entre les commandes émises par une personne et tout bruit de fond provenant d’un jeu vidéo ou d’un film en cours de lecture. Les microphones peuvent également être utilisés pour le chat vocal et la communication dans le jeu, qui sont des fonctionnalités qui nécessitent généralement l’utilisation d’un casque.