Assembler une mosaïque sphérique complète en utilisant uniquement un smartphone et des données de capteur?

Question

Je suis vraiment intéressé par l'application mobile Google Street View, qui intègre une méthode pour créer un panorama sphérique entièrement fonctionnel en utilisant uniquement l'appareil photo de votre smartphone. Ce qui me frappe le plus, c'est qu'elle parvient toujours à créer la sphère entière, même en assemblant un ciel ou un plafond d'un bleu monochrome sans aucun détail. ce qui m'amène à penser qu'ils n'utilisent pas de correspondance basée sur les fonctionnalités.

Est-il possible d'obtenir une mosaïque sphérique pleine de qualité décente sans utiliser la fonction basée sur l'appariement et en utilisant uniquement les données du capteur? Les capteurs de smartphone sont-ils suffisamment précis? Quelle bibliothèque serait utilisable pour faire ceci? OpenCV? Autre chose?

Merci!

Answer 1

Les fonctions sont requises pour l'enregistrement. Dans l'application, l'interface utilisateur intelligente s'assure qu'ils savent déjà où chaque photo est par rapport à la sphère, donc dans le cas extrême tout ce qu'il faut faire est reproject/warp et mélange. Aucun traitement de géométrie supplémentaire requis.

Je suppose qu'ils essaient de faire quelques petites corrections pour améliorer l'enregistrement, mais même si ceux-ci échouent, vous pouvez vous rabattre sur ceux basés sur le capteur acquis au moment de la capture.

Il s'agit d'un cas où une interface utilisateur intelligente rend le problème de vision beaucoup plus facile.