Два признака ультразвукового звона пережили смену площадки лучше Random Forest

Колесо можно простучать молотком, поставить рядом воздушный ультразвуковой микрофон и услышать, как металл отдаёт накопленную энергию. В этой короткой послезвучащей волне авторы выделили скорость затухания и разброс формы отклика от удара к удару. На 22 неподвижных колёсных парах проверка с исключением по одной колёсной паре дала 21 верное решение из 22: обнаружены все 17 дефектных объектов, одна из пяти исправных пар ушла в ложную тревогу. Конкретный Random Forest при обучении на одной площадке и проверке на другой правильно определил лишь 8 из 11 колёсных пар.

Контраст здесь не в состязании «физика против ИИ» вообще. Random Forest получил 109 признаков и 500 деревьев, однако зависимость части этих признаков от условий измерения оказалась сильнее, чем ожидалось. При переносе модели с полигона MxV Rail в Колорадо на площадку Norfolk Southern в Виргинии она почти перестала узнавать исправные колёса: из трёх ошибок все три были новыми исправными парами. Дефектные объекты модель находила уверенно, поэтому такой перекос легко пропустить, если смотреть только на общую долю правильных ответов.

Что именно остаётся после удара

Каждую пару возбуждали в шести точках, трижды в каждой. Бесконтактный микрофон находился примерно в 330–355 mm от колеса; анализ шёл в полосе 20–80 kHz. Первый признак — эффективный коэффициент затухания: скорость спада энергетической кривой, делённая на доминирующую частоту в диапазоне 20–35 kHz. Такая нормировка убирает часть различий между колёсами, которые просто звенят на разных частотах. Второй признак описывает межквартильный разброс качества линейной аппроксимации энергетического спада между тремя одинаковыми ударами. Повреждённое колесо отличается и тем, как быстро гасит ультразвуковую энергию, и тем, насколько стабильно повторяет этот спад.

Где метод пока может обмануть

Пороги, настроенные по полному набору одной площадки, дали 11 из 11 на другой площадке в обоих направлениях переноса. Это красивый результат, однако внешней независимой проверкой его считать нельзя: признак повторяемости изначально отбирали, располагая данными обеих площадок. Авторы отдельно повторили процедуру строже: для каждой тестовой пары исключали её и из настройки порогов, и из выбора второго признака. Именно эта вложенная проверка дала 21 из 22.

Где проверка ещё слаба

Работа предлагает индикатор для скрининга, а не диагноз. По двум числам нельзя определить тип трещины, её размер, место или физическую причину. Особенно существенна конструкция выборки: на площадке Norfolk Southern исправные колёсные пары стояли на рельсе, а дефектные лежали на земле. Условия опоры способны менять затухание и тем самым частично разделять классы вместо самого дефекта. Все пять исправных объектов были новыми, поэтому одна ложная тревога уже снижает долю верно распознанных исправных пар до 0.80.

Следующий честный экзамен для метода — третья площадка, изношенные, но годные колёса, одинаковая опора и движущийся состав. Если два параметра переживут этот экзамен, инспекционная система сможет принимать решение по понятному следу в физике колеса, а не по набору признаков, чья связь с повреждением теряется после переезда аппаратуры.