ИИ учится читать чертежи не только по линиям, но и по подписям

На любом чертеже CAD (это просто цифровой формат для черчения, в котором делают планы этажей и прочую техническую документацию) есть не только линии и условные обозначения, но и текст: названия помещений, размеры, коды элементов. Казалось бы, очевидный источник информации, но существующие программы автоматического распознавания символов на чертежах эти подписи почти не используют — они смотрят на чертёж примерно как человек без очков: видят контуры, но не буквы.

Авторы предложили модель TextCAD, которая читает чертёж сразу двумя "глазами" — графическим и текстовым. Специальный блок распознаёт не просто отдельные слова, а их смысл и роль ("это площадь помещения", "это название комнаты"), а затем сопоставляет эту текстовую информацию с графическими элементами на разных уровнях детализации — от общего плана до отдельной стены. На реальных наборах данных подход заметно точнее прежних методов распознаёт символы на чертежах.

Зачем это нужно на практике: это более надёжная автоматическая оцифровка и проверка старых или сложных чертежей. Программы смогут точнее понимать, что изображено на плане, — а значит, меньше ручной сверки при переводе бумажного архива или "мутного" PDF в рабочую CAD-модель.