Распознаватель высоты звуков, интеграция с Друпал

Аватар пользователя univerico univerico 24 мая в 13:14

Здравствуйте! Есть вопрос, даже не знаю, в какую сторону гуглить. Нужно как-то реализовать на сайте на Друпал 7 или 8 распознавание нот как звуков (т. е. распознаватель высоты звуков, а не распознаватель картинки).

0 Thanks

Комментарии

Аватар пользователя Andruxa Andruxa 24 мая в 16:27
2

Ну, сидишь ты такой перед компом, насвистываешь мелодию, а тебе бац в браузере - партитура.

Аватар пользователя univerico univerico 24 мая в 16:56

Что есть "звук" на Drupal-сайте?

Предполагается найти готовый распознаватель высоты звука бесплатный или платный и как-то его прикрутить на сайт. Просто вывести.
По этому принципу работает например программа "абсолютный слух" в приложениях Андроид и IOS, приложения для тренировки пения интервалов.
Отображать это потом графически пока не планируется.

Аватар пользователя bumble bumble 24 мая в 17:00

Еще раз...
Каким боком, сайт на Drupal, должен участвовать в этом процессе "распознавания"?
Что именно он (Drupal) должен "распознавать"?
Каков источник данных?
Какой формат?

Аватар пользователя univerico univerico 24 мая в 17:38

Имею ввиду, например, тюнеры, которые распознают высоту звука и сравнивают с эталоном
а)либо выбранным вручную пользователем фиксированным,
б) либо с ближайшим эталоном, "чистой нотой" в зависимости от строя.
Т.е. например, звучит звук, 425 Гц, а эталон заданный для данного задания 435, программа эту разницу определяет и как-то выводит на экран Например, тюнер https://online-tuner.ru/ . Вот здесь он сравнивает с ближайшей "чистой нотой"
И еще есть приложения типа "абсолютного слуха" где можно вручную задать с какой нотой сравнивать или даже есть заданная последовательность, но там ограничен функционал, я хочу с помощью друпал расширить его. Именно по части правил, с чем сравнивать звук. Механизм оценки высоты звука в Гц взять готовый. "Вход" просто через микрофон, как аудио. Т.е. в минимуме Друпал просто выводит этот функционал (типа тюнера) на сайт (например так же, как выводится флэш, в фрейме и т.д.). В более предпочтительном варианте сделать что-то типа API или еще как-то и именно с помощью Друпал
а)воспроизводить какие-то определенные звуки
б)и с ними же (или с их высотами Гц) сравнивать, при этом на сайте задавать правило, с какой последовательностью нужно сравнивать.

Аватар пользователя bumble bumble 24 мая в 17:54
1

Ок...
У Вас есть реальное понимание того как именно это должно работать?
Возможно Вы знаете реальные примеры такого функционала (даже не с Drupal, а с PHP, в принципе)?

Я вот лично, не встречал еще никаких компонентов позволяющих хоть сколько сносно работать со звуком при помощи PHP.
Преимущественно, из-за того что PHP это совсем не о таких вещах как "звук".
А если не PHP, то есть ли у Вас понимание того как другие средства интегрировать с PHP и Drupal, в частности? Есть ли тому обоснования? (Только без примеров каких-то там "приложений в айфрейме", никто не побежит бекинжинирить их для ответа на форуме).

Ну и в целом, надеюсь у Вас есть понимание того, где находится условный "микрофон", а где Drupal, и что их может связывать. Так же, справедливо и для "воспроизводителей звуков".

На данном этапе, скорее похоже на то, что Вы собираетесь делать ерунду (ИМХО, конечно).

Аватар пользователя gun_dose gun_dose 24 мая в 18:02
1

Воу-воу-воу, палехчи! Какой ещё пхп? Это должно делаться на фронте через js без передачи данных на сервер.

Аватар пользователя bumble bumble 30 июня в 22:02

Это ближе к истине, согласен. Но:

univerico wrote:

В более предпочтительном варианте сделать что-то типа API или еще как-то и именно с помощью Друпал

Кагбэ предполагает что это на стороне Drupal (читать PHP), в ином случае - это совершенно не касается ни Друпала, ни этого форума в принципе.

Аватар пользователя univerico univerico 24 мая в 22:31

Еще раз уточню, что предполагалось, что непосредственно со звуком все будет делаться не с помощью Друпал
(а, например, как здесь на swift), потом этот сторонний функционал выдавал бы результат в виде численного значения в Герцах, например, или в виде "смыслового" (возможно я не совсем корректно формулирую с точки зрения терминологии) (или как в миди "номером" ноты на клавиатуре или словом " do-re-mi", а уже алгоритм обработки этого результата определять с помощью Друпал, например, если первая нота больше 420 Гц, то ..., если меньше 420 Гц, то ... и т.д. ).

Я вот лично, не встречал еще никаких компонентов позволяющих хоть сколько сносно работать со звуком

Ясно. Тогда видимо готовых средств для интеграции с Друпал такого функционала нет, ну или я его сейчас не смогу найти, придется сначала по специализированным источникам определиться со способом обработки звука и потом уже думать, как это прикрутить на сайт.

Аватар пользователя univerico univerico 24 мая в 22:40

Ищите библиотеку на js

Спасибо большое!
А под какую операционку указывается в описании имеет значение?
Или если это будет web, то все равно?
Как еще сузить поиск?
По запросу "library for the website tuner" выдается что-то типа этого
1) Вот это для web
https://github.com/FerCa/tuner
Можно его будет прикрутить на Друпал сайт?

2)Для Андроида https://github.com/gstraube/cythara

Аватар пользователя Andruxa Andruxa 24 мая в 19:31

Полагаю, что примерно с таким же успехом это можно реализовать с помощью Пауэр поинта.

Аватар пользователя sas@drupal.org sas@drupal.org 25 мая в 8:08
1

Вот не наступил Вам соловей на глаза, а так то ..

js web запись звука https://github.com/mattdiamond/Recorderjs
flash https://github.com/michalstocki/FlashWavRecorder
Модуль для друпал для записи аудио https://github.com/michalstocki/FlashWavRecorder
Через них можно получить доступ к звуку + нужен еще компонент который будет определять частоту

Аватар пользователя univerico univerico 25 мая в 8:53

Вот не наступил Вам соловей на глаза, а так то ..

Если я верно понимаю вашу шутку, то в моем случае сначала руки должны вбить в поиске нужное, чтобы глаза увидели. Спасибо. Все буду тестировать и изучать.

Аватар пользователя sas@drupal.org sas@drupal.org 25 мая в 10:31
1

Она добрая без задней мысли, смайлик просто не прошел материцию, но посмотреть библиотеки имхо стоит, да и модуль.