MeshCoder — это платформа, которая преобразует облака 3D-точек в редактируемые скрипты Blender на Python, что позволяет программно реконструировать и редактировать сложные объекты, созданные человеком.
Она преодолевает существовавшие ранее ограничения за счёт разработки выразительных API для моделирования сложных геометрических форм, создания крупномасштабного набора данных из 1 миллиона пар «объект — код» в 41 категории и обучения мультимодальной языковой модели для генерации точного сегментированного кода на основе облаков точек.
Этот подход превосходит существующие методы по качеству реконструкции, поддерживает интуитивно понятное редактирование формы и топологии с помощью модификации кода и расширяет возможности 3D-рассуждений в больших языковых моделях.
🐱 GitHub