Explication
Le streaming fovéal (foveated streaming) est une technique d'optimisation de la diffusion de contenus immersifs qui exploite le suivi oculaire (eye tracking) pour transmettre en haute résolution uniquement la zone où l'utilisateur regarde, tout en réduisant la qualité en périphérie du champ de vision. Inspiré du fonctionnement de l'œil humain (la fovéa ne perçoit les détails fins que sur une zone étroite), ce procédé réduit drastiquement la bande passante et la puissance de calcul nécessaires sans perte perceptible de qualité visuelle.
Exemple concret
En regardant une vidéo 360° streamée, la zone devant vos yeux est en 4K net, tandis que les côtés sont flous – mais comme vos yeux ne voient pas les détails en périphérie, vous ne remarquez rien
À quoi ça sert concrètement ?
- Streaming de vidéos 360° haute résolution (8K+) sur des connexions limitées en ne transmettant le plein détail que là où l'utilisateur regarde
- Cloud rendering VR : réduire la bande passante serveur → casque en concentrant les pixels sur la fovéa
- Expériences multijoueurs à grande échelle : optimiser la charge réseau par utilisateur
- Applications professionnelles (médical, industriel) nécessitant à la fois haute résolution et faible latence
Foveated rendering vs Foveated streaming
Foveated rendering (rendu fovéal)
- Optimisation côté GPU : le moteur de rendu calcule moins de détails en périphérie
- Réduit la charge graphique locale (gain de performance de 30 à 50 %)
- Nécessite un eye tracker intégré au casque
- Utilisé par Meta (Quest Pro), Apple (Vision Pro), PlayStation VR2
Exemple : Le Quest Pro calcule 100 % des pixels au centre du regard et seulement 25 % en périphérie, permettant des graphismes plus riches
Foveated streaming (diffusion fovéale)
- Optimisation côté réseau : seule la zone fovéale est transmise en pleine résolution
- Réduit la bande passante nécessaire (jusqu'à 70-80 % d'économie)
- Critique pour le cloud VR et le streaming 360° haute résolution
- Nécessite une faible latence entre eye tracking et adaptation du flux
Exemple : Un flux 360° en 12K est streamé, mais seul un patch de 2K autour du regard est envoyé en pleine qualité, le reste en basse résolution
Exemple VR parlant
Une entreprise diffuse une visite virtuelle 360° en 12K de son usine à des investisseurs distants portant des casques VR avec eye tracking. Grâce au streaming fovéal, chaque spectateur reçoit un flux optimisé : la zone exacte où il regarde (une machine, un panneau de contrôle) est transmise en pleine résolution, tandis que le reste de la sphère 360° arrive en qualité réduite. Résultat : une qualité perçue excellente avec seulement 20 % de la bande passante qu'un flux 12K complet nécessiterait.
Pourquoi est-ce essentiel en VR professionnelle ?
- Le streaming fovéal est la clé pour diffuser des contenus 360° ultra-haute résolution (8K, 12K) sur les réseaux actuels
- Il rend viable le cloud rendering VR en réduisant la bande passante à des niveaux compatibles avec la 5G et le Wi-Fi 6
- Combiné à l'eye tracking, il offre un gain de performance sans compromis perceptible sur la qualité visuelle
- Technologie essentielle pour l'avenir du streaming XR, portée par les progrès de l'eye tracking embarqué