Учёные выяснили, почему строительные роботы «не видят» рабочих на корточках
Строительные роботы должны распознавать людей на объектах, однако они регулярно пропускают тех, кто находится в низких позах — работает на коленях или нагнувшись. Исследователи изучили цепочку автоматической разметки обучающих данных и нашли причину, по которой кадры с такими людьми теряются.
Оказалось, что встроенный фильтр качества сам выбрасывает эти кадры из-за низкой уверенности алгоритма в обнаружении или неопределённости при оценке суставов. В результате люди в низких позах составляют лишь около 2% от всех сохранившихся примеров в датасетах. В итоге обученный детектор чаще пропускает рабочих в таких положениях.
Главная проблема в том, что для отбора подобных редких кадров нельзя полагаться на ограничивающие рамки (bounding boxes) или оценки поз. Оценка положения суставов с помощью NLF не помогает, а подгонка высоты рамки под рост стоящего человека всё равно оставляет пропуски рабочих в согнутых позах.
Текст подготовлен ИИ по материалу первоисточника.
Сигнал
Автоматическая фильтрация при разметке данных удаляет кадры с людьми в низких позах, из-за чего строительные роботы хуже их распознают.
Шум
Уверенность в том, что редкие позы рабочих можно легко собрать в датасет, полагаясь только на автоматическую разметку, ограничивающие рамки и оценки поз.
Термины из этой записи