El grupo Meta, empresa matriz de Facebook, ha desarrollado su propio chip para acelerar la visualización en tiempo real de sus futuros avatares en sus auriculares VR. De hecho, Meta ha desarrollado una tecnología llamada Pixel Codec Avatar (PiCA), que mejora significativamente la naturalidad de los rostros artificiales en VR, tanto desde el punto de vista de la precisión de la imagen como de la animación.

c4b2ffd95c5039bc9764b642e6271

La primera versión de este sistema se ejecutó en una tarjeta gráfica muy poderosa (Nvidia Titan X), una GPU que consume demasiada energía para integrarse en un auricular VR. Para admitir PiCA en un casco de realidad virtual, los ingenieros de la empresa han desarrollado un chip específico. Es un procesador que integra una CPU con juego de instrucciones RISC-V, un poco de memoria y sobre todo un acelerador de red neuronal que se encarga de los cálculos de este códec en tiempo real. Grabado en 7 nm, este chip de tan solo 2,56 mm² se centra en su tarea (calcular el campo de visión en el espacio teniendo en cuenta el seguimiento ocular y generar datos PiCA), cálculo 3D y visualización bien soportada por la GPU del SoC del Quest 2, plataforma que se utilizó para su desarrollo inicial.

084bc28b2885e624c0a649d412e8b

Si el chip se desarrolló para PiCA, su desarrollo implicó, a su vez, repensar por completo esta tecnología para aprovechar al máximo este chip personalizado. Es probable que el códec pudiera haber sido soportado por la parte de IA de un chip, como el Hexágono de un Snapdragon… Pero el hecho de haber desarrollado esta simbiosis códec/chip permite a Meta reducir drásticamente el consumo de energía y, en el proceso, la huella térmica de su tecnología.

Notamos de pasada que Meta aprovechó este desarrollo de un chip relativamente simple (pequeño procesador de 32 bits, solo 2 MB de SRAM) para ensuciarse las manos en el conjunto de instrucciones RISC-V. En evidente detrimento de ARM.

Fuente : Camino a la realidad virtual