ARTICLE 05 [ NIV 1-2-3 ] SCANNER un corps ou un objet réel en 3D à 360° pour visualiser le résultat en Réalité Augmentée ou en Réalité Virtuelle

Jean Noel — 2023-01-08T18:24:53Z

Pourquoi lirais-je cet article ? Quelles sont les usages pédagogiques proposés ?

[ NIV 1-2-3 ] En arts plastiques, avec le casque META QUEST 2, les créateurs ou les utilisateurs qui chercheront à savoir comment importer un objet 3D réel dans le casque auront ici une réponse. Cet article vous proposera de le visualiser seul ou de l'inclure dans un environnement spécifique (in situ ou non). Par la même occasion, nous verrons qu'il sera possible de transposer cette numérisation dans un espace réel en réalité augmentée. Avec tous ces usages possibles, la notion d'hybridation est mise en exergue. Pédagogiquement, avec leur enseignant, les élèves qui expérimentent (en situation de projet) dès la troisième ou en lycée, pourront être amenés à questionner ces relations. Très concrètement, on peut aussi envisager une monstration (interactive ou non) de travaux d'élèves en volume pour les restituer en dehors de la classe et de l'établissement (y compris pour l'oral du BAC).

[ NIV 2 ] Ce qui suit n'est pas abordé dans cet article mais après vos premières tentatives de numérisation et quelques erreurs plus tard, vous comprendrez par vous-même qu'une autre piste pédagogique pourrait vous amener à "détourner" l'usage du scanner 3D pour vous écarter de l'hyperréalisme attendu. Autrement dit : vous pourriez scanner un environnement, une personne ou un objet en visant intentionnellement l'écart, pour l'envisager non pas comme une erreur technique mais comme une expression, une sensibilité ou comme une pratique artistique particulière où le hasard et le BUG auraient leur place. En y réfléchissant, cet outil ne permettrait-il pas de revisiter le cubisme à l'ère du numérique ?

NB > Si vous voulez inclure cette création dans une galerie d'art virtuelle, c'est possible, mais comme cela nécessite des compétences techniques importantes et des manipulations numériques complexes [ NIV 4 ], nous traiterons cela dans un article dédié, ultérieurement. ]

Pour toute question éventuelle, nous vous informons qu'il est rédigé par :

pierrick.brissier@ac-normandie.fr [Enseignant dans un établissement scolaire classé REP dans l'ORNE / Interlocuteur Académique de Caen pour le Numérique de 2002 à 2022 / Formateur / Webmestre / et dorénavant membre du pôle de compétence numérique académique de Normandie]
jean.noel@ac-normandie.fr [Enseignant dans deux établissements scolaires dans le CALVADOS / RRUPN / Intervenant technique durant les formations numériques spécifiquement dédiées à la RV / Webmestre]

A / SCANIVERSE (pour iOS) c'est quoi ?

C'est une application qui permet de numériser bon nombre d'objets, de personnes, d'environnements réels. Autrement dit : c'est un SCANNER 3D !

Matériel compatible avec cette application exclusive à APPLE (iOS)
Précision : nul besoin d'avoir un LIDAR embarqué !!!
iPhones depuis 2018 ou plus récents :
iPhone 14 / 14 Plus / 14 Pro / 14 Pro Max
iPhone 13 / 13 Mini / 13 Pro / 13 Pro Max
iPhone 12 / 12 Mini / 12 Pro / 12 Pro Max
iPhone 11 / 11 Pro / 11 Pro Max
iPhone XR / XS / XS Max
iPhone SE (2è et 3è génération)
Tous les iPads avec un processeur A12 ou plus récents :
iPad (8è génération ou plus récente)
iPad Air (4è génération ou plus récente)
iPad Mini (5è génération ou plus récente)
iPad Pro 12.9" (3è génération ou plus récente)
iPad Pro 11" (Toutes générations)

TEST de PIERRICK > "SCANIVERSE est une application incroyable qui permet de numériser efficacement un objet ou un corps existant afin de le faire réapparaître dans le réel en réalité augmentée (avec un export USDZ) ou dans le casque au sein d'un espace virtuel (via > SKETCHFAB) ! Et si vous souhaitez créer une galerie d'art ou un environnement particulier avec BLENDER / SPOKE ou UNITY, l'export de fichier 3D (en OBJ ou GLB par exemple) s'avèrera un atout supplémentaire pour réinjecter cette modélisation dedans. L'application vous permettra également d'exporter le résultat sous la forme d'une vidéo avec de très nombreuses options de rotations. SCANIVERSE est une application que l'on installe dans son smartphone ou sa tablette mais elle est exclusive à APPLE. Il existe au moins une autre application alternative disponible pour ANDROID que nous aborderons également tout en bas de cette page."
TEST de JEAN > "SCANIVERSE fait partie de ces nombreuses apps sur iOS permettant de scanner en 3D grâce à la photogrammétrie. Au delà du fait d'être gratuite, elle présente l'avantage de tout faire en local. Dautres applications comme TRNIO, fonctionnent de la même façon, mais vont envoyer toutes les donnés dans des serveurs distants qui les traiteront pour réaliser le modèle 3D. SCANIVERSE, lui, fait tout sur votre tablette ou smartphone. Là où TRNIO peut prendre 15 minutes pour vous donner un résultat après la phase de scan, SCANIVERSE, lui, vous donnera un résultat en 3 ou 4 minutes pour les plus longs. Il permet également d'éditer votre modèle 3D en le recadrant et le redressant. Cerise sur le gâteau, SCANIVERSE propose de multiples formats d'exportation, là encore, gratuitement, tandis que les autres apps proposent souvent ce genre de choses dans leur partie payante. L'app est précise, voire très précise ; ce qui vous demandera un petit entrainement afin d'effectuer des scans d'une grande qualité. La technologie photogrammétrique ne permet pas de scanner les matériaux transparents ou translucides correctement, les surfaces unies et/ou brillantes sont également mal captées. Plus votre sujet est texturé et mat, plus votre scan sera efficace. Les petits objets seront également une difficulté. Un objet de 10 cm minimum vous assurera un résultat avec un minimum de qualité. C'est la seule app que j'utilise maintenant pour scanner des travaux d'élèves, des figurines, ou même des lieux ! Son seul vrai défaut est que cette app n'est disponible que sur les machines iOS."

B / [ NIV 3 ] Pourquoi et comment utiliser SCANIVERSE ?

Grâce à cette application, nous avons la possibilité de numériser des objets de petites ou de grandes dimensions, des personnes existantes, ou bien encore des environnements réels plus conséquents tels que des parois, des bâtiments, une rue... Ici, nous avons fait le choix de numériser notre collègue d'arts plastiques présente à la formation.

Voyons comment y parvenir :

Et maintenant, voici le résultat issu de cette NUMÉRISATION 3D :

C / [ NIV 3 ] Observons le résultat obtenu une fois UPLOADÉ (= transféré) vers SKETCHFAB :

Ce processus (d'upload = transfert) fut expliqué dans l'article spécifiquement dédié à SKETCHFAB.

NB : Lorsque le fichier issu de SCANIVERSE est exporté vers SKETCHFAB, il subit une compression c'est à dire une diminution des polygones qui constituent le volume numérisé. Par voie de conséquence, la résolution ou la qualité finale du volume visible est quelque peu amoindrie. Mais en zoomant, on s'aperçoit que cela demeure toutefois vraiment très satisfaisant. Le plus important étant d'avoir une excellente gestuelle qui enveloppera le volume à numériser. Plus la numérisation 3D sera propre et réussie avec SCANIVERSE, plus le résultat sur SKETCHFAB sera optimal.

Scaniverse - 3D Tran Phoummasak by Heefergant61 on Sketchfab

Pierrick BRISSIER by Brissier.P on Sketchfab

En cliquant sur l'affichage du "model inspector"dans la partie inférieure droite de SKETCHFAB, on pourra observer les polygones.

Sachez qu'il est possible de modifier la texture de l'objet numérisé pour lui donner une apparence semblable à de l'aluminium.

D / [ NIV 3 ] voici les TUTORIELS OFFICIELS du développeur de SCANIVERSE

https://scaniverse.com

E / [ NIV 2 ] POURQUOI et COMMENT REGARDER en RV (une numérisation SCANIVERSE exportée dans SKETCHFAB) ?

Pour retrouver la tridimensionnalité d'un objet numérisé lorsqu'il est inséré dans le réel en réalité augmentée, le spectateur tournera autour. Mais l'écran de visionnage (smartphone ou tablette) est en 2D. Utiliser un casque de Réalité Virtuelle vous permettra donc de voir l'objet 3D en 3D !

Après avoir numérisé le corps de Tran PHOUMMASAK avec SCANIVERSE, le modèle 3D fut exporté dans SKETCHFAB. En utilisant le Meta Quest2 (casque oculus de RV - Réalité Virtuelle), il est à présent possible de chercher et de retrouver le fichier 3D avec BROWSER (l'application servant de navigateur web dans le casque) sur le site internet de SKETCHFAB. Attendre le chargement complet du fichier au sein de la page puis cliquer précisément sur l'icône des lunettes en bas à droite

> View in VR <

Le spectateur verra en 3D le modèle 3D préalablement numérisé.
Le spectateur a la possibilité de se déplacer dans cet espace virtuel, tout autour du modèle.
Le spectateur a la possibilité de modifier l'échelle du modèle (augmenter/réduire).
Le spectateur a la possibilité de transporter ce fichier SKETCHFAB dans un autre espace interactif et communautaire. Par exemple en lien ici : HUBS MOZILLA. Espace dans lequel il sera possible de faire apparaître par exemple une galerie d'art préalablement créée par vos soins avec ce logiciel en ligne disponible avec ce lien : SPOKE ( Un article [ NIV 4 ] abordera ce sujet ultérieurement ).

F / [ NIV 1 ] POURQUOI et COMMENT REGARDER en RA (une numérisation SCANIVERSE exportée dans SKETCHFAB) ?

PÉDAGOGIQUEMENT : faire apparaître un modèle 3D personnel dans un couloir, sur un support ou dans un lieu spécifiquement choisi peut s'avérer intéressant en arts plastiques. On peut interagir avec l'œuvre. On peut questionner la notion d'échelle. On peut penser et créer une œuvre in situ pour projeter son installation future et sans détériorer le lieu. Mais en RA (= RÉALITÉ AUGMENTÉE) on peut également questionner la notion d'hybridation (Réalité numérique et réalité physique).

La réalité augmentée permet au spectateur de voir le modèle 3D à 360°, en tournant physiquement autour.

Rappelez-vous cette œuvre interactive intitulée :

Le veau d'or de Jeffrey SHAW

.
Avec son smartphone, il est dorénavant possible d'obtenir ce résultat en utilisant l'application SKETCHFAB. Avec deux doigts posés sur l'écran, le modèle qui apparaît en réalité augmentée (dans le lieu choisi) peut être redimensionné ou pivoté afin de le faire coïncider avec une zone réelle spécifique.

Cette vidéo vous montrera comment faire avec un modèle personnel mais il est possible de choisir une œuvre d'art numérisée qui provient d'une collection (sculpture du musée du Louvre par exemple).

G / [ NIV 3 ] WIDAR (pour ANDROID mais également disponible pour iOS)

TEST de MAËL > " WIDAR est une application performante et capable de produire des résultats assez bluffants. Contrairement aux autres, elle offre des outils de retouche efficaces après la prise de vue. Il est par exemple possible de gommer certaines parties du scan 3D. Il est également possible de "sculpter" le résultat grâce à des outils permettant de lisser, de creuser ou de gonfler certaines parties choisies du scan 3D. En revanche, on ne peut que regretter les nombreux bugs rencontrés, notamment au moment de la modélisation où l'application demande a être redémarrée à plusieurs reprises. "

WIDAR est une application de création de contenu 3D qui vous permet de numériser et d'éditer des modèles 3D sur votre smartphone. Vous pouvez profiter de la création de contenus 3D de haute qualité, visualiser directement sur l'appareil, jouer en RA et publier le contenu sur la communauté intégrée à l'application. En outre, vous pouvez également exporter du contenu 3D à utiliser dans le jeu, l'effet VFX dans les films, l'architecture, la construction, AR, VR, l'impression 3D et NFT.

Arts Plastiques / Académie de Normandie