SightCAD научил ИИ воссоздавать 3D-модели объектов, зажатых в углах и прикрученных к стенам
Обычно методы CAD-реконструкции требуют идеального обзора объекта со всех сторон. В жизни всё сложнее: детали прикручены к стенам, зажаты в углах или лежат на полу. Система SightCAD учитывает эти ограничения: она выбирает от 1 до 5 доступных точек съёмки в помещении и передаёт кадры нейросети (VLM). ИИ превращает их в исполняемый код CadQuery, создавая точную параметрическую модель.
Алгоритм выбирает самые информативные ракурсы, превосходя лучшие аналоги на 17–21 пункт по точности геометрии (метрика effective-mIoU). Доля нерабочего кода не превышает 1,5%. Это позволяет восстанавливать параметрические 3D-модели объектов даже в условиях существенного перекрытия обзора.
Слабое место — эксперименты проводились на объектах из CAD-бенчмарков (DeepCAD, Fusion360) и промышленных деталях (T-LESS, MP6D).
Текст подготовлен ИИ по материалу первоисточника.
Сигнал
ИИ учится восстанавливать точную геометрию объектов в реальных условиях помещений с ограниченным обзором.
Шум
Пока это эксперименты на бенчмарках и промышленных деталях, а не готовый пользовательский инструмент.
Термины из этой записи