Исследователи института инженерных и цифровых технологий Белгородского государственного университета разработали программу, которая анализирует аудиосигналы и распознает тревожные звуки — выстрелы, бьющееся стекло, крики. Об этом Науке Mail сообщили в пресс-службе Минобрнауки России.
Нейросеть «видит» звук как спектрограмму, графический отпечаток, и учится считывать с него признаки опасности. В основе программного модуля — сверточные нейронные сети. Он устойчив к помехам: разработчики обучили нейросеть на датасете из более чем 250 естественных шумов (пение петухов, шум машин, голоса). В отличие от классического частотного анализа, программа не путает похожие звуки. Например, выстрел и шум проезжающего автомобиля.
Наша программа не путает звуки бьющегося стекла и посторонние звуки, даже если они похожи. Некоторые проезжающие автомобили издают звуки, очень похожие на выстрелы, наша программа четко это разграничивает
Объем программы — около 200 Мб, она работает на обычном персональном компьютере со звуковой картой. Это чисто программное решение, которое не требует суперкомпьютеров или специального оборудования, , в отличие от зарубежного аналога ShotSpotter. Модуль можно интегрировать в существующую инфраструктуру: большинство камер видеонаблюдения уже оснащены микрофонами. По звуку программа способна «засечь» опасное действие там, где камера бессильна — за углом или в толпе.
Сейчас разработчики переводят модуль из режима фрагментарного анализа в режим непрерывного мониторинга. К концу 2026 года систему планируют протестировать в естественной городской среде. В перспективе программа научится распознавать агрессивную речь и крики, чтобы предупреждать об опасности еще до ее наступления.
Ранее Наука Mail писала о том, что в ученые Сколтеха оценили эффективность ИИ для прогнозов природных катаклизмов.