Tema: InstaNeRF con VR

Escribe un mensaje

Mensajes

  • Usuario eliminado (7750)

    Colaborador

    24 Jul 2017 07:41

    Mensajes: 4076

    Ubicación: Alcalá de Guadaíra (Sevilla)

    Visores

    Oculus Quest
    Oculus Quest 2
    Meta Quest 3
    Usuario eliminado (7750) » 4 FEB 2023  19:12

    Os recomiendo probar InstaNeRF que ahora le han metido soporte VR, lo triste es que no sé hacer mis propios NeRF (hay que instalar varias cosas, cambiar drivers de la gráfica, etc. aunque en teoría una vez todo instalado crear un 3D es sencilla con unas pocas fotos, muchas menos que en fotogrametría, o un video), pero probarlo sí es sencillo con algun modelo 3D ya hecho (yo sólo he visto el del zorro que trae de demo). Como se puede ver, al menos por ahora, para tener un "holograma en VR" de un momento concreto, o sea, una foto VR, es tal vez de las mejores soluciones.

     

     

    https://developer.nvidia.com/blog/turn-2d-images-into-immersive-3d-scenes-with-nvidia-instant-nerf-in-vr/

     

    Si alguno sabe alguna forma sencilla de crear modelos de esos que lo diga :P

    2

  • cercata

    5 Dic 2016 09:41

    Mensajes: 26083

    Ubicación: Bilbao

    Visores

    PlayStation VR
    Oculus Go
    Oculus Quest
    HP Reverb
    Oculus Link
    Oculus Quest 2
    Meta Quest 3
    cercata » 6 FEB 2023  15:38
    » Respuesta a Usuario eliminado (7750)

    Tienes iPhone ? Parece que las 2 formas "sencillas" de las 3 que hay, son con iPhone solo :(

     

    https://github.com/NVlabs/instant-ngp/blob/master/docs/nerf_dataset_tips.md

    0

  • cercata

    5 Dic 2016 09:41

    Mensajes: 26083

    Ubicación: Bilbao

    Visores

    PlayStation VR
    Oculus Go
    Oculus Quest
    HP Reverb
    Oculus Link
    Oculus Quest 2
    Meta Quest 3
    cercata » 10 OCT 2023  8:43
    » Respuesta a Usuario eliminado (7750)

    Dicen que ha salido al mejor que NeRF:

     

    1

  • Usuario eliminado (7750)

    Colaborador

    24 Jul 2017 07:41

    Mensajes: 4076

    Ubicación: Alcalá de Guadaíra (Sevilla)

    Visores

    Oculus Quest
    Oculus Quest 2
    Meta Quest 3
    Usuario eliminado (7750) » 10 OCT 2023  10:29
    » Respuesta a cercata

    sip, estoy al tanto y he visto ejemplos, es curioso lo poco que pesa y consume, aunque es verdad que depende de como esté hecho, sólo se ve bien a determinadas distancias, te acercas a un NeRF o Gaussian Splats de estos y buf, regulero.

    0

  • Usuario eliminado (121961)

    18 May 2019 11:57

    Mensajes: 2230

    Visores

    HTC Vive
    Pimax 8K X
    Lenovo Explorer
    Samsung Odyssey
    Samsung Odyssey+
    HP Reverb
    HP Reverb G2
    Usuario eliminado (121961) » 10 OCT 2023  10:59
    » Respuesta a Usuario eliminado (7750)
    yonmacklein sólo se ve bien a determinadas distancias, te acercas a un NeRF o Gaussian Splats de estos y buf, regulero.

     

    Me da que de momento será muy útil para crear nube de puntos más rápido y preciso con menos imágenes, para aplicar luego texturas mejor que "brochazos", pero tiempo al tiempo si se multiplica la resolución de esos brochazos.

    0

  • cercata

    5 Dic 2016 09:41

    Mensajes: 26083

    Ubicación: Bilbao

    Visores

    PlayStation VR
    Oculus Go
    Oculus Quest
    HP Reverb
    Oculus Link
    Oculus Quest 2
    Meta Quest 3
    cercata » 10 OCT 2023  11:13
    » Respuesta a Usuario eliminado (121961)
    Jolitpara aplicar luego texturas mejor que "brochazos"

     

    Algo así menciona al final video, pero que de momento no es facil.

     

    Y tambien dice que es muy bueno para hacer captura de moviemiento.

    0

  • Usuario eliminado (7750)

    Colaborador

    24 Jul 2017 07:41

    Mensajes: 4076

    Ubicación: Alcalá de Guadaíra (Sevilla)

    Visores

    Oculus Quest
    Oculus Quest 2
    Meta Quest 3
    Usuario eliminado (7750) » 13 OCT 2023  7:00
    » Respuesta a cercata

    por si quieres probar a verlos en VR, aqui un visor basado en Unity para PCVR

     

    https://github.com/clarte53/GaussianSplattingVRViewerUnity

     

     

    Performances

    On the sample "bicycle" scene, from the viewpoint depicted below, rendering 1024x1024 pixels on an NVIDIA GeForce RTX 3060 Ti gives to the following measurements:

    Official SiBr viewer / OpenGL(FOV 60°): 12ms (80 FPS)
    Unity / DirectX 11 (FOV 60°): 15ms (67 FPS)
    Unity / OpenXR (2 eyes, FOV 90°): 38ms (26 FPS)
    1

  • cestomano

    19 Abr 2018 09:12

    Mensajes: 618

    Ubicación: Tagoror (Canarias)

    Visores

    Oculus Link
    Air Link
    Meta Quest 3
    cestomano » 13 OCT 2023  9:05
    » Respuesta a Usuario eliminado (7750)

    Estuve probando ese visor ayer y... Ufff, la 4070Ti no da. Tengo q bajar bastante la resolución para mantener los 90 fps.
    Pero la sensación de realismo con algunos modelos es la leche! (salvo cuando te acercas, claro).

     

    Ah, hice un modelo por si lo queréis probar:
    poly.cam/capture/08de2c11-d36c-4415-81e1-4a796b5cd74e

     

    Me alucina lo de los brillos (en las manchas marrones del objeto), como cambian según el punto de vista. eek

    José Ángel (a.k.a cestomano; a.a.k.a. ¿VR o RV?)

    1

  • Usuario eliminado (121961)

    18 May 2019 11:57

    Mensajes: 2230

    Visores

    HTC Vive
    Pimax 8K X
    Lenovo Explorer
    Samsung Odyssey
    Samsung Odyssey+
    HP Reverb
    HP Reverb G2
    Usuario eliminado (121961) » 13 OCT 2023  11:01
    » Respuesta a cestomano
    cestomano
    Ah, hice un modelo por si lo queréis probar:
    poly.cam/capture/08de2c11-d36c-4415-81e1-4a796b5cd74e

     

    Flipante el objeto y las reflexiones naturales de luz que recrea, pero casi tan alucinante para mí, las composiciones visuales que se generan en el error de interpretación del algoritmo en los fondos, sobretodo en esa zona de elementos azulados. Puro arte abstracto.

    1

  • cestomano

    19 Abr 2018 09:12

    Mensajes: 618

    Ubicación: Tagoror (Canarias)

    Visores

    Oculus Link
    Air Link
    Meta Quest 3
    cestomano » 13 OCT 2023  11:29
    » Respuesta a Usuario eliminado (121961)
    Jolit Puro arte abstracto.

     

    +1
    Ciertamente es muy curioso y visualmente llamativo.

    José Ángel (a.k.a cestomano; a.a.k.a. ¿VR o RV?)

    0
Escribe un mensaje

Usuarios navegando por este foro:

CapitanCarcosa alVRto xavier_llorach qwer er_garry Andy Du Rioga 9 Anónimo