Лучшие приложения для идентификации звука для музыки и птиц

Вы когда-нибудь слышали, как птица поет за вашим окном, и задавались вопросом, какой именно это вид? Приложение для идентификации звука может ответить на этот вопрос за считанные секунды. 🎵

Технология звуковой идентификации вышла далеко за рамки новизны. Теперь он обеспечивает наблюдение за птицами, обнаружение музыки и даже мониторинг безопасности дома - и все это с микрофона смартфона.

Понимание того, как работают эти приложения (и какие функции на самом деле имеют значение (действительно имеют значение), помогает выбрать правильный инструмент вместо загрузки пяти приложений, которые плохо выполняют одно и то же.

Как на самом деле работает технология распознавания звука#

Большинство приложений для идентификации полагаются на процесс под названием аудио дактилоскопия. Приложение преобразует звуковую волну в спектрограмму, по сути, визуальную карту частоты с течением времени, а затем сравнивает эту картину с огромной базой данных.

В частности, для идентификации птиц модели машинного обучения обучаются на тысячах записей каждого вида. Проект Merlin компании Cornell Lab, например, обработал миллионы аудиоклипов, чтобы научить алгоритмы различать веселую трель малиновки и резкий свист кардинала.

Приложения для идентификации музыки, такие как Shazam, используют другой, но связанный подход. Они создают уникальную “fingerprint” из пиков песни в звуковом спектре, затем сопоставляют ее с каталогом, содержащим десятки миллионов треков, менее чем за пять секунд.

Три основные категории звуковых приложений#

• Идентификаторы птиц и диких животных часто в сочетании с распознаванием фотографий
• Инструменты распознавания музыки идентифицировать песни, играющие в реальном времени, в том числе с радио или телевидения
• Общие классификаторы звука нутряная сигнализация, разбивание стекла, лай собаки, полезная для доступности и безопасности дома

Почему звуковая идентификация птиц резко возросла в популярности#

Раньше наблюдение за птицами требовало многолетнего опыта работы в полевых условиях, хорошей пары биноклей и толстого путеводителя. Теперь пятисекундная запись выполняет большую часть тяжелой работы. 🐦

По данным Общества Одюбона, во время пандемии участие в наблюдении за птицами в Соединенных Штатах подскочило примерно на 40%, и загрузка приложений следовала той же кривой. Люди, застрявшие дома, впервые начали замечать дикую природу на заднем дворе.

Интересным этот сдвиг делает уровень точности. Современные приложения могут различать похожие по звучанию виды с удивительной точностью — отличает, скажем, Каролинского крапивника от домашнего крапивника, что поставит в тупик многих случайных слушателей.

Что делает приложение для идентификации птиц надежным#

Не каждое приложение в этой категории работает одинаково. Качество зависит от нескольких конкретных факторов:

Фактор	Почему это важно
Размер базы данных	Приложения, охватывающие более 1000 видов, лучше справляются с региональными вариациями, чем библиотеки меньшего размера
Автономный режим	Необходим для удаленных троп или парков без сигнала
Фото + звук комбо	Перекрестные ссылки на визуальные и аудиоданные повышают уверенность в идентификации
Фильтрация шума	Отделяет целевые крики птиц от ветра, транспорта или других животных

Приложения, которые объединяются идентификация фото с распознаванием звука, как правило, в целом работает лучше, поскольку они могут подтвердить предположение двумя разными способами, а не полагаться только на звук.

Приложения для идентификации музыки: помимо простого названия песни#

Shazam, приобретенная Apple в 2018 году, сейчас обрабатывает более 20 миллионов поисковых запросов в день по всему миру. Но технология, лежащая в основе этого, незаметно превратилась в нечто более полезное, чем просто подтверждение названия песни.

Многие музыкальные приложения теперь используют тексты песен, синхронизированные для воспроизведения, напрямую ссылаются на потоковые платформы и создают доступную для поиска историю всего, что вы когда-либо идентифицировали. Эта история со временем становится личным музыкальным дневником.

Практические сценарии, в которых сияют музыкальные приложения#

• Поймать песню, играющую в кафе или магазине, прежде чем она закончится
• Определение фоновой музыки в видео- или киносцене
• Открытие ремиксов или каверов на треки, которые вы уже знаете
• Автоматическое создание плейлистов из идентифицированных песен

Стоит упомянуть одно ограничение: музыкальные приложения испытывают трудности с живыми выступлениями, сильно переработанными треками или песнями со значительным фоновым шумом. Точность заметно падает в многолюдной и громкой обстановке.

Сравнение точности различных типов приложений#

Точность - это не единичное число (女 сильно варьируется в зависимости от условий. Четкая запись одиночной птицы, поющей поблизости, может достичь точности идентификации 95%. То же приложение, анализирующее утренний хор с перекрытием десяти видов, может упасть до 60% или ниже.

Шум окружающей среды является самым большим убийцей точности во всех категориях. Ветер, трафик, перекрывающиеся звуки сбивают с толку даже хорошо обученные алгоритмы.

Советы по повышению точности идентификации#

• Записывайте не менее 5-10 секунд, а не быстрый фрагмент
• Подойдите как можно ближе к источнику звука
• Избегайте записи во время сильного ветра или дождя
• Используйте наушники со встроенным микрофоном для более чистого ввода при идентификации музыки в помещении
• Регулярно обновляйте базы данных (с течением времени расширяйте их новыми данными об обучении)

Некоторые приложения также позволяют пользователям подтвердить или исправить предположение, которое возвращается к улучшению модели. Подобная краудсорсинговая коррекция является частью того, почему точность идентификации продолжает расти из года в год.

Выбор подходящего приложения для ваших нужд#

У кого-то, случайно интересующегося воробьем за окном, потребности отличаются от потребностей серьезного береза, отслеживающего миграцию в течение сезона.

Для обычных пользователей простой интерфейс с мгновенными результатами имеет большее значение, чем просто огромная база данных видов. Для преданных своему делу любителей такие функции, как прицельные журналы, карты миграциии совместное использование сообщества добавьте реальную долгосрочную ценность.

Вопросы, которые стоит задать перед загрузкой#

• Работает ли он в автономном режиме или требует постоянного доступа в Интернет?
• Является ли база данных видов специфичной для региона или глобальной?
• Может ли он идентифицироваться как по фотографиям, так и по аудиозаписям?
• Хранит ли он историю прошлых идентификаций?
• Существует ли бесплатный уровень с действительно полезной функциональностью?

Цена также заслуживает упоминания. Большинство авторитетных приложений предлагают надежную бесплатную версию с дополнительными премиальными обновлениями для расширенных функций, таких как неограниченная идентификация или подробные руководства по видам.

Растущая роль ИИ в повседневном наблюдении за природой#

То, что начиналось как нишевый инструмент для орнитологов, превратилось в основной шлюз для воссоединения с внешним миром. Школы теперь используют приложения для идентификации птиц на уроках естественных наук. Их рекомендуют посетителям смотрители парка. Гражданские научные проекты собирают миллионы точек данных от обычных пользователей, направляющих телефон в небо.

Эти данные также возвращаются в природоохранные исследования. eBird, управляемая Корнеллской лабораторией орнитологии, собрала более миллиарда наблюдений за птицами от обычных пользователей по всему миру, многие из которых были отправлены через сопутствующие приложения для идентификации.

Вот в чем тихая сила этой технологии (она превращает пятисекундное любопытство в небольшой вклад в понимание популяций птиц, миграционных сдвигов и даже влияния климата на поведение диких животных.

Пытаетесь ли вы назвать песню, застрявшую в голове, или выяснить, какая птица продолжает будить вас на рассвете, правильное приложение превращает догадки в ответ, которому вы можете доверять ♪ и часто учит вас чему-то новому на этом пути. 🌿