Zip-NeRF: Anti-Aliased Grid-Based Neural Radiance Fields

Chargement du lecteur...
Rejouer
Fermer

Alors j’ai pas tout compris mais apparement ils utilisent un NERF (?) qui convertit des images en 2D en scènes en 3D.

https://jonbarron.info/zipnerf/

Envoyé par Flaneur le 15 avril 2023 à 12h59

+ 1 -

Tandy Vermisseau

Proche tous commerces, écoles et administrations. Curieux s'abstenir.
+ 10 -

Toto51 Vermisseau

Nerf, c est pas le pistolet pour les gosses?
+ 1 -

GruikMan Vermisseau

Tu veux dire que ce serait une image de synthèse ?
+ 1 -

KukuLele Vermisseau

Un peu de recherche :
https://github.com/google/mipnerf

En gros c'est un algorithme qui permet de faire la correspondance entre les pixels de plusieurs images exactement comme pour la photogrammétrie mais en limitant les problèmes liés aux techniques classiques : trous d'absence de correspondance, problème d'aliasing/pixelisation quand on zoome/dézoome car les objets 3D sont texturés (comme dans un jeu vidéo), et pour ça justement il ne passe pas par la 3D classique. C'est une sorte de "simili 3D" ou si tu préfères, une sorte de nuage de points constamment recalculé.

Ici ils ont combiné l'algorithme mip-NeRF avec un autre (Instant NGP) pour encore améliorer le procédé et ont appelé ça "zip-NeRF".
+ 0 -

Flaneur En réponse à KukuLele Ver TikToké

Ça a l’air vachement bien pour du simili 3D, et ce que j’avais bien compris quand je disais qu’avec un nerf on peut faire une vidéo 3D à partir d’image en 2D?
+ 1 -

KukuLele En réponse à Flaneur Vermisseau

Attention ça n'avait rien de péjoratif, c'est juste que comme je l'ai dit ça ne passe pas par les techniques habituelles pour faire de la 3D, mais effectivement stricto sensu cela est de la 3D parce que la profondeur (coordonnées Z) est gérée. Maintenant, quand je dis "simili" c'est parce que tu ne peux rien faire d'autre que générer ce genre de vidéo ; en effet, tu ne peux pas faire comme dans la 3D classique : gérer les sources/conditions d'éclairage, déplacer des objets 3D dans la scène etc. Pour cela il faudra passer par les techniques 3D classiques, mais tu perdras en qualité.
+ 0 -

Flaneur En réponse à KukuLele Ver TikToké

Ok dac aussi sur ce lien on peut avoir une visu 360 en se déplaçant

https://youtu.be/Pb-opEi_M6k
Inscrivez-vous ou Connectez-vous pour envoyer un commentaire
56