Diagnostic et réparation : problèmes de sauts et de dérives du contenu dans les applications

"Le contenu virtuel dérive", "les objets tremblent", "la position est instable" — ce sont des problèmes courants rencontrés par les développeurs dans les applications de réalité augmentée. L'instabilité du contenu peut gravement nuire à l'immersion, voire entraîner une mauvaise expérience utilisateur.

Cet article vous aidera à comprendre les causes des sauts et dérives du contenu et fournira une méthodologie systématique pour le dépannage et l'optimisation.

Distinguer les "tremblements normaux" des "dérives anormales"

Tout d'abord, nous devons établir des attentes réalistes. Atteindre un suivi AR de haute précision sur les appareils mobiles est intrinsèquement difficile. Les situations suivantes relèvent de la plage normale, ne peuvent être complètement éliminées, mais peuvent être optimisées :

• Tremblements fins à haute fréquence (Jitter) :

  • Manifestation : Les objets virtuels présentent un tremblement subtil, de l'ordre du millimètre.
  • Cause : Cela est dû au bruit physique des capteurs de l'appareil, aux limites de précision des algorithmes de suivi visuel et aux micro-mouvements naturels de la main tenant l'appareil.
  • Exemple : Lors d'une observation rapprochée (par exemple, placer un objet virtuel sur une table et s'en approcher), ce léger tremblement est normal.

• Dérive brève (Drift) :

  • Manifestation : Lorsque l'utilisateur déplace ou tourne rapidement l'appareil, l'objet virtuel présente un écart de position pendant une courte durée (0,5 à 1 seconde), puis revient à sa place.
  • Cause : En cas de mouvement rapide, les erreurs cumulatives de l'IMU (unité de mesure inertielle) du système SLAM de l'appareil et le délai du positionnement visuel entraînent une dérive temporaire.
  • Exemple : Dans les scènes dynamiques, cela est acceptable. Si l'objet "revient" rapidement à sa position correcte, le système fonctionne.

Les situations suivantes, en revanche, sont des problèmes anormaux nécessitant dépannage et correction :

• Dérive de position continue et importante : L'objet virtuel dévie lentement et continuellement de sa position initiale, sans revenir ou après un long délai.
• Sauts ou scintillements violents : L'objet virtuel saute de manière importante à l'écran ou apparaît et disparaît de façon erratique.
• Incohérence de position relative avec les objets réels : L'objet virtuel ne parvient pas à rester stablement "épinglé" sur l'objet réel.

Note

De plus, un point crucial est à noter :
Pour les appareils fonctionnant en mode 0DoF, 3DoF ou 5DoF, le sentiment d'"adhérence" et de "réalisme" est naturellement inférieur à celui des appareils 6DoF. Lorsque l'utilisateur se déplace rapidement, tourne ou monte/descend des escaliers, les objets virtuels ne peuvent pas suivre parfaitement.
Ainsi, les phénomènes comme le contenu "flottant dans les airs" ou le "décalage de position" dans ces modes relèvent de limitations fondamentales de l'appareil, et non des "pannes de sauts ou dérives du contenu" discutées ici.
Pour comprendre les différences d'expérience entre les différents modes xDoF, veuillez consulter l'introduction dans Meilleures pratiques de navigation.

Processus systématique de dépannage

Suivez cet ordre de dépannage, en commençant par les causes les plus probables.

Étape 1 : facteurs externes et matériels (aucune modification de code nécessaire)

1. Vérification de l'environnement physique :

   • Richesse texturale
     Votre environnement de test est-il trop monotone ? De grandes surfaces murales blanches, des sols lisses ou des surfaces vitreuses peuvent entraîner des échecs ou des erreurs de positionnement visuel.
   • Objets dynamiques
     Y a-t-il beaucoup d'objets en mouvement dans l'environnement (comme une foule, des véhicules en déplacement) ? Les objets dynamiques perturbent le positionnement visuel, mais ce problème est souvent temporaire.
   • Confusion de scène
     Existe-t-il des zones très similaires et facilement confondables dans l'environnement (comme différentes entrées d'ascenseurs) ? Des zones visuellement similaires peuvent nuire au positionnement, entraînant des sauts entre ces zones. Ce type de problème peut être évité en définissant au préalable des informations appropriées.

2. Vérification matérielle de l'appareil :

   • Échauffement de l'appareil
     L'appareil est-il fortement échauffé après une utilisation prolongée ? La surchauffe entraîne une limitation de fréquence du CPU/GPU, affectant les performances du système SLAM lui-même, une cause courante de dérive persistante.
   • Performances de l'appareil
     Sur certains appareils anciens, les limitations de performances matérielles et de précision des composants rendent plus susceptibles les dérives d'échelle, entraînant la dérive du contenu virtuel. Essayez de tester sur un autre appareil pour déterminer si le problème est dû à une limitation matérielle.

Étape 2 : analyse de la qualité de la carte et du positionnement (utilisation d'outils externes)

1. Utilisation de Mega Toolbox :

   • Exécutez Mega Toolbox au même emplacement et observez la stabilité de son positionnement.
   • Si le positionnement de Toolbox dérive/saute aussi : Le problème vient de la carte elle-même ou l'environnement actuel n'est pas propice au positionnement.
   • Si le positionnement de Toolbox est stable : Le problème vient de votre application. Passez à l'étape 3.

2. Simulation sur PC des données EIF :

   • Rejouez les données EIF enregistrées sur le terrain.
   • Si la lecture dérive/saute aussi : Cela indique que la scène elle-même n'est pas propice au positionnement, ou que la carte elle-même a un problème, ou que le suivi de mouvement de l'appareil ayant enregistré l'EIF présentait une dérive d'échelle.
   • Si la lecture est stable : Cela signifie que la scène est intrinsèquement favorable au positionnement, le problème provient probablement de facteurs comme l'échauffement ou la limitation de fréquence de votre application en temps réel.

Étape 3 : vérification de la logique interne de l'application

1. Mise à jour de la pose :

   • Appliquez-vous un lissage supplémentaire inutile aux données de pose (comme un Lerp ou SmoothDamp excessif) ? Cela peut introduire une latence et un sentiment de dérive.
   • En général, l'utilisation directe de la Pose brute renvoyée par Mega est la plus stable.

2. Correspondance des systèmes de coordonnées :

   • Vérifiez que les relations entre les nœuds de vos objets virtuels, de la caméra de scène et du MegaTracker sont correctes, et que vous n'avez pas modifié les valeurs des local transform des nœuds eux-mêmes sous MegaBlocks.
   • Des erreurs de configuration des nœuds entraînent des transformations de coordonnées incorrectes, provoquant des comportements imprévisibles lors du rendu du contenu.

Rappel spécial : problèmes de superposition visuelle sur les casques OST

Après avoir vérifié la logique de positionnement et de rendu, si vous utilisez un casque OST (Optical See-Through), un cas particulier doit être considéré.

Même si l'appareil dispose d'une bonne capacité de suivi des mouvements 6DoF, vous pouvez parfois rencontrer des problèmes de "collage" imparfait entre les objets virtuels et l'espace physique. Ce n'est généralement pas une défaillance du service de positionnement Mega, mais un phénomène inhérent aux principes optiques des casques OST, comme des erreurs d'alignement optique ou des différences de calibrage oculaire.

Pour une explication détaillée et une méthode d'évaluation de ce type de problème, veuillez consulter l'introduction dans Note spéciale pour les casques OST.

Résumé et bonnes pratiques

Grâce au dépannage précédent, vous devriez avoir identifié la cause profonde des sauts ou dérives du contenu. Pour faciliter votre revue rapide et vos actions, nous résumons dans le tableau ci-dessous les symptômes courants, les causes possibles et les bonnes pratiques. En fonction de vos résultats de dépannage, trouvez la solution correspondante dans ce tableau.

Type de problème	Cause possible	Bonne pratique
Tremblements fins	Bruit des capteurs, limite algorithmique	Ces micro-tremblements sont normaux, généralement sans nécessiter d'attention excessive
Dérive après mouvement rapide	Latence SLAM, correction algorithmique	Guider l'utilisateur à déplacer l'appareil lentement. Si pas de récupération rapide, nécessite une attention supplémentaire
Dérive continue importante	Défaillance SLAM, variations matérielles	Tester sur un autre appareil pour vérification croisée
Sauts/scintillements violents	Scène confuse, non propice au positionnement	Définir des informations a priori supplémentaires ou guider l'utilisateur
Incohérence de position relative avec l'objet réel	Erreur de positionnement/carte, erreur logique dans le code	Tester sous plusieurs angles, observer la position de l'objet virtuel, corriger les erreurs de code potentielles

Si votre problème persiste malgré ce dépannage et ces corrections, veuillez nous soumettre un rapport détaillé via le formulaire Signalement de problème, en incluant des enregistrements d'écran, des données EIF et des journaux détaillés.