Интересная работа под названием "Shap-E: Generating Conditional 3D Implicit Functions" от OpenAI. Shap-E - это генеративная модель для создания 3D-объектов.
Модель обучается в два этапа: сначала обучается encoder, а затем обучается diffusion model на выходах encoder'а. Обучение на большом наборе данных с 3D и текстовыми данными позволяет создавать сложные и разнообразные 3D-объекты за секунды. В сравнении с Point-E, explicit generative model на основе point clouds, Shap-E сходится быстрее и достигает сопоставимого или лучшего качества.
Paper: https://arxiv.org/abs/2305.02463
Github: https://github.com/openai/shap-e
Demo: https://huggingface.co/spaces/hysts/Shap-E