En gros c'est un algorithme qui permet de faire la correspondance entre les pixels de plusieurs images exactement comme pour la photogrammétrie mais en limitant les problèmes liés aux techniques classiques : trous d'absence de correspondance, problème d'aliasing/pixelisation quand on zoome/dézoome car les objets 3D sont texturés (comme dans un jeu vidéo), et pour ça justement il ne passe pas par la 3D classique. C'est une sorte de "simili 3D" ou si tu préfères, une sorte de nuage de points constamment recalculé.
Ici ils ont combiné l'algorithme mip-NeRF avec un autre (Instant NGP) pour encore améliorer le procédé et ont appelé ça "zip-NeRF".
Ça a l’air vachement bien pour du simili 3D, et ce que j’avais bien compris quand je disais qu’avec un nerf on peut faire une vidéo 3D à partir d’image en 2D?
Attention ça n'avait rien de péjoratif, c'est juste que comme je l'ai dit ça ne passe pas par les techniques habituelles pour faire de la 3D, mais effectivement stricto sensu cela est de la 3D parce que la profondeur (coordonnées Z) est gérée. Maintenant, quand je dis "simili" c'est parce que tu ne peux rien faire d'autre que générer ce genre de vidéo ; en effet, tu ne peux pas faire comme dans la 3D classique : gérer les sources/conditions d'éclairage, déplacer des objets 3D dans la scène etc. Pour cela il faudra passer par les techniques 3D classiques, mais tu perdras en qualité.
Tandy Vermisseau
Toto51 Vermisseau
GruikMan Vermisseau
KukuLele Vermisseau
https://github.com/google/mipnerf
En gros c'est un algorithme qui permet de faire la correspondance entre les pixels de plusieurs images exactement comme pour la photogrammétrie mais en limitant les problèmes liés aux techniques classiques : trous d'absence de correspondance, problème d'aliasing/pixelisation quand on zoome/dézoome car les objets 3D sont texturés (comme dans un jeu vidéo), et pour ça justement il ne passe pas par la 3D classique. C'est une sorte de "simili 3D" ou si tu préfères, une sorte de nuage de points constamment recalculé.
Ici ils ont combiné l'algorithme mip-NeRF avec un autre (Instant NGP) pour encore améliorer le procédé et ont appelé ça "zip-NeRF".
Flaneur En réponse à KukuLele Ver TikToké
KukuLele En réponse à Flaneur Vermisseau
Flaneur En réponse à KukuLele Ver TikToké
https://youtu.be/Pb-opEi_M6k