Работа со звуком (частоты)

@krasn_miha · Регистрация: 08.10.2015

Author24 — интернет-сервис помощи студентам

Привет.

Меня интересует как работать со звуком на С-подобных языках. Какие существуют для этого библиотеки и подходы.
Очень хочется сделать свой аудио визуализатор, это те самые ступеньки в эквалайзере, которые пляшут в зависимости от частоты.
Но я не знаю, как выцепить все эти частоты из аудио файлов для дальнейшей обработки.

Может быть, кто-то сталкивался с готовым решением (опенсорсом) на эту тематику?
И есть ли у вас предположения, почему разные визуализаторы отображают разное число этих столбцов? Это произвольное разбитие всего частотного диапазона? На эту тематику нет общих стандартов/рекомендаций?

Буду признателен вам за помощь.

@Fulcrum_013 · 08.10.2015, 19:50

Сообщение от krasn_miha

Но я не знаю, как выцепить все эти частоты из аудио файлов для дальнейшей обработки.

Выцепить просто - преобразование Фурье, потом налагаешь частотные фильтры.

Сообщение от krasn_miha

И есть ли у вас предположения, почему разные визуализаторы отображают разное число этих столбцов? Это произвольное разбитие всего частотного диапазона? На эту тематику нет общих стандартов/рекомендаций?

Сколько фильтров разоботчику захотелось наложить - столько и полосок.

@krasn_miha · 08.10.2015, 19:59 **[ТС]**

Сообщение от Fulcrum_013

Выцепить просто - преобразование Фурье, потом налагаешь частотные фильтры.

К сожалению мне не доводилось работать с преобразованиями Фурье. Вы можете подсказать какой нибудь хороший источник на эту тему? Я понимаю, что это известная тема и есть много теории в сети, но мне тяжело найти информацию с практическим уклоном и примером реализации в программировании.

Сообщение от Fulcrum_013

Сколько фильтров разоботчику захотелось наложить - столько и полосок

Если я правильно понял, то одна полоска = один фильтр?

@Fulcrum_013 · 08.10.2015, 20:23

Сообщение от krasn_miha

Если я правильно понял, то одна полоска = один фильтр?

Ну да. Преобразование Фурье преобразовывает семпл из функции A(t) (амплитуда от времени)в A(n) (амплитуда от частоты). потом разделяете результат преобразования на интервалы (необязательно равные) и находите какое то усредненное значение (какое именно - зависит от того что найти надо) по каждому интервалу - это и будет значение полосок.
Сам для этих дел пользовал фришную библиотеку aqua

Добавлено через 18 минут
http://www.freepascal.ru/downl... 00/fft.pdf немного доки по БПФ разжевано все прекрасно, пример реализации преобразования правда на паскале, но там все настолько просто что думаю перевод на С++ труда не составит.

@nmcf · 08.10.2015, 20:46

Что за "фильтр"? Количество "полосок" зависит от размера блока.

@Fulcrum_013 · 08.10.2015, 20:56

Сообщение от nmcf

Что за "фильтр"?

Обычно mel-фильтры используют.

Сообщение от nmcf

Количество "полосок" зависит от размера блока.

От размера банка фильтров, иначе шаг в диапазоне частот каждой полоски будет одинаковый, а он обычно логарифмический, что тоже говорит именно о mel-фильтрах. И если брать блоки по 0,1с при частоте 44.1kHz к примеру то на выходе БПФ будет 4410 значений.

@nmcf · 08.10.2015, 21:53

В БПФ нет никаких фильтров. Я об этом.

@Fulcrum_013 · 08.10.2015, 21:59

Сообщение от nmcf

В БПФ нет никаких фильтров. Я об этом.

В БПФ нет. Они налагаются на результат БПФ.

@krasn_miha 0 / 0 / 0 Регистрация: 08.10.2015 Сообщений: 2
		1
	Работа со звуком (частоты) 08.10.2015, 19:44. Показов 6733. Ответов 7 Метки нет (Все метки) Привет. Меня интересует как работать со звуком на С-подобных языках. Какие существуют для этого библиотеки и подходы. Очень хочется сделать свой аудио визуализатор, это те самые ступеньки в эквалайзере, которые пляшут в зависимости от частоты. Но я не знаю, как выцепить все эти частоты из аудио файлов для дальнейшей обработки. Может быть, кто-то сталкивался с готовым решением (опенсорсом) на эту тематику? И есть ли у вас предположения, почему разные визуализаторы отображают разное число этих столбцов? Это произвольное разбитие всего частотного диапазона? На эту тематику нет общих стандартов/рекомендаций? Буду признателен вам за помощь. Миниатюры 0

@Fulcrum_013 2082 / 1573 / 169 Регистрация: 14.12.2014 Сообщений: 13,614
	08.10.2015, 19:50	2
	Сообщение от krasn_miha Но я не знаю, как выцепить все эти частоты из аудио файлов для дальнейшей обработки. Выцепить просто - преобразование Фурье, потом налагаешь частотные фильтры. Сообщение от krasn_miha И есть ли у вас предположения, почему разные визуализаторы отображают разное число этих столбцов? Это произвольное разбитие всего частотного диапазона? На эту тематику нет общих стандартов/рекомендаций? Сколько фильтров разоботчику захотелось наложить - столько и полосок. 2

@krasn_miha 0 / 0 / 0 Регистрация: 08.10.2015 Сообщений: 2
	08.10.2015, 19:59 [ТС]	3
	Сообщение от Fulcrum_013 Выцепить просто - преобразование Фурье, потом налагаешь частотные фильтры. К сожалению мне не доводилось работать с преобразованиями Фурье. Вы можете подсказать какой нибудь хороший источник на эту тему? Я понимаю, что это известная тема и есть много теории в сети, но мне тяжело найти информацию с практическим уклоном и примером реализации в программировании. Сообщение от Fulcrum_013 Сколько фильтров разоботчику захотелось наложить - столько и полосок Если я правильно понял, то одна полоска = один фильтр? 0

@Fulcrum_013 2082 / 1573 / 169 Регистрация: 14.12.2014 Сообщений: 13,614
	08.10.2015, 20:23	4
	Сообщение от krasn_miha Если я правильно понял, то одна полоска = один фильтр? Ну да. Преобразование Фурье преобразовывает семпл из функции A(t) (амплитуда от времени)в A(n) (амплитуда от частоты). потом разделяете результат преобразования на интервалы (необязательно равные) и находите какое то усредненное значение (какое именно - зависит от того что найти надо) по каждому интервалу - это и будет значение полосок. Сам для этих дел пользовал фришную библиотеку aqua Добавлено через 18 минут http://www.freepascal.ru/downl... 00/fft.pdf немного доки по БПФ разжевано все прекрасно, пример реализации преобразования правда на паскале, но там все настолько просто что думаю перевод на С++ труда не составит. 1

@nmcf 7803 / 6567 / 2988 Регистрация: 14.04.2014 Сообщений: 28,706
	08.10.2015, 20:46	5
	Что за "фильтр"? Количество "полосок" зависит от размера блока. 0

@Fulcrum_013 2082 / 1573 / 169 Регистрация: 14.12.2014 Сообщений: 13,614
	08.10.2015, 20:56	6
	Сообщение от nmcf Что за "фильтр"? Обычно mel-фильтры используют. Сообщение от nmcf Количество "полосок" зависит от размера блока. От размера банка фильтров, иначе шаг в диапазоне частот каждой полоски будет одинаковый, а он обычно логарифмический, что тоже говорит именно о mel-фильтрах. И если брать блоки по 0,1с при частоте 44.1kHz к примеру то на выходе БПФ будет 4410 значений. 0

@nmcf 7803 / 6567 / 2988 Регистрация: 14.04.2014 Сообщений: 28,706
	08.10.2015, 21:53	7
	В БПФ нет никаких фильтров. Я об этом. 0

@Fulcrum_013 2082 / 1573 / 169 Регистрация: 14.12.2014 Сообщений: 13,614
	08.10.2015, 21:59	8
	Сообщение от nmcf В БПФ нет никаких фильтров. Я об этом. В БПФ нет. Они налагаются на результат БПФ. 0