Автор Тема: Эксперименты звукообработки (и тесты, тесты, тесты)  (Прочитано 140321 раз)

0 Пользователей и 5 Гостей просматривают эту тему.

Оффлайн NSb-2

  • Живу на форуме
  • *******
  • Сообщений: 7398
  • Shit in - Shit out
    • pornhub.com
Ну... В цифре и нет оптики, там только алгоритмы описывающие поведение.  ;D

Оффлайн Винтик на отдыхе Автор темы

  • Эксперт
  • *****
  • Сообщений: 2868
Цитировать
Ну... В цифре и нет оптики, там только алгоритмы описывающие поведение.  ;D

Поэкспериментровал тут с детектором атаки, ну типа как в друм-триггерах

И вот подумал, наши мозги ведь тот-же хард с софтом, внутри там тоже лишь типа "цифровое" все
И вот там же, походу, и все это "поведение", вместе с его-же "описанием".......

Вот, к примеру, как мы чотко различаем где когда атака происходит... а попробуй на компе - тот еще гемор, то какие атаки пропускает, то, наоборот, одну атаку детектирует как несколько

****

Это я к чему?
Нейросети - штука, конечно, весьма полезная в музыкальных процессорах - там где устройство должно уметь различать понятийные какие-то вещи...

Вот, скажем, играет трек с барабасами, где все на одном треке - и бочка с рабочим, и хет, тарелки... с добавлением нейросети можно сделать такой процессор, который в этом треке будет чотко отличать где именно бочка бухает, где молотит рабочий, где цыкает хет и т.д...
И, к примеру, сразу будет в мидидорожку экспортировать сразу с раскидывая по партиям, да еще где там открытый хет, закрытый, прочие нюансы - все это уже реализуемо в принципе..
« Последнее редактирование: Ноября 04, 2020, 02:01:57 от Винтик на отдыхе »

Оффлайн NSb-2

  • Живу на форуме
  • *******
  • Сообщений: 7398
  • Shit in - Shit out
    • pornhub.com
Ну во первых сенсоры в ушах достаточно маленькие и быстрые, а далее - мозг, куда компу до мощностей мозга в обсчете информации.
Причем наша слуховая система умудряется среди похожих звуков выделить нужный, при этом эффект маскировки не отменятся - парадокс, цепляемся за нюансы.

Цитировать
Вот, скажем, играет трек с барабасами, где все на одном треке - и бочка с рабочим, и хет, тарелки... с добавлением нейросети можно сделать такой процессор, который в этом треке будет чотко отличать где именно бочка бухает, где молотит рабочий, где цыкает хет и т.д...
И, к примеру, сразу будет в мидидорожку экспортировать сразу с раскидывая по партиям, да еще где там открытый хет, закрытый, прочие нюансы - все это уже реализуемо в принципе..

Если делать на основе триггеров - лажа будет, они реагируют на фронт волны, а слух может избирательно и на фронт и на состав реагировать.
Скажем у ударных основа - атака, у скрипки сустейн, но при этом если запороть атаку ударных - все равно слышим, что звук исходит от ударных, так же и со скрипкой, нарисуй ей атаку определим как скрипку.
При этом нам требуется время на анализ, слишком короткие звуки плохо идентифицируется. Очень показательно с низкочастотными звуками, чрезмерно короткие ноты баса для слуха звучат как бочка.

Собственно на этом и основан синтез, он на грани распознавания, слишком примитивный по составу. Отсюда все забивается фильтрами, хорусами делеями и прочими перделками обогащающими спектр и дающий ему движение.
 


... и добавил:

Но сама тема интересная, физика в связке с психоакустикой. Психология восприятия звуков.  :hmmm:

... и добавил:

Во всяком случае в микшировании да и при проектировании усилителей вещь нужная.
« Последнее редактирование: Ноября 04, 2020, 02:32:52 от Returned to trash »

Оффлайн Винтик на отдыхе Автор темы

  • Эксперт
  • *****
  • Сообщений: 2868
Цитировать
Если делать на основе триггеров - лажа будет...

Не, ну это понятно, что чтобы научить нейросеть различать музыкальные понятия из всего-лишь переменного во времени напряжения - нужно сперва как-то так этот поток трансформировать, чтобы... ну фиг знает, вот лица же научили различать, и не только лица... игрался как-то с какой-то программой, которой подсовывешь картинку, а нейросеть пишет - ЧТО, скорее всего, - на ней изображено... упорно пытался этой проге скормить всякие порнокартинки, зараза... нейросеть-монашка какая-то

Но суть то в том, что нейросеть может делать понятийные различения картинок, значит и звуковое полотно теоретически можно научить фильтровать по понятиям, типа "в этом аудиообразце басист не попадает в ритм, а барабанщик, скорее всего - и вовсе пьян" ))
Думать, конечно, нейросеть не может, т.е. абстрагироваться как-то там и сама себя учить различать новые понятия, формировать новые понятия и т.д...
Но на том уровне - на котором и учатся умнеть большинство человекообразных существ - вполне уже и нейросетка могет, в смысле, когда в мозгу складываются нужные связи благодаря дрессировке внешними обстоятельствами, кнутом и пряником

Насколько техническая сторона важна - тоже фиг знает
Вот я слышал мнение, что очень опытный звукорежиссер способен и на перделках услышать что-то такое, что не опытный только на мониторах услышит, и то не факт...
В данном случае техническую разрешающую способность заменяет - накопленный опыт
В плане нейросети - накопление опыта - это и есть то самое "научение" ее, формирование у нее нужных связей со всеми отклонениями...
Т.е. тут еще зависит и от того - сколь долго и кропотливо дрючить нейросеть, пока она не научится различать по каким-то там нюансам..

Опять таки, действительно, чтобы узнать какое-то явление - мозгу нужно время... т.е. басист в таком случае бы дергал струну спустя там, послекунды - типа услышал что стучит бочка, но это еще не точно, прошло еще немного времени - а ну да - это точно был удар бочки, значит можно дернуть струну...
Но в реальности ведь не так, потому что нейросеть в наших головах уже давно заранее "знает" что там должно стучать и играть, и реагирует уже на автопилоте при самом раннем начале атаки. Мозг заранее ожидает - в какое мгновение должна стукнуть бочка - и дергает струну едва возникает малейший признак ожидаемого, а чаще и вовсе уже не слушая - так сказать - "войдя в поток"
То-исть, "вхождение в поток", "на автопилоте" - это когда нейросеть заранее знает уже все что должно произойти, и уже не анализирует детально, а действует тупо по сформированному совокупному "Знанию"
« Последнее редактирование: Ноября 04, 2020, 14:32:32 от Винтик на отдыхе »

Оффлайн NSb-2

  • Живу на форуме
  • *******
  • Сообщений: 7398
  • Shit in - Shit out
    • pornhub.com
Цитировать
игрался как-то с какой-то программой, которой подсовывешь картинку, а нейросеть пишет - ЧТО, скорее всего, - на ней изображено... упорно пытался этой проге скормить всякие порнокартинки, зараза... нейросеть-монашка какая-то

 ;D ;D ;D ах-ты шалун какой  :D :D :D

... и добавил:

Распознавать лица в какой-то мере проще, есть несколько типичных шаблонов, остальное вопрос памяти в которую забивают трафареты нюансов и особенностей, далее система сопоставляет наибольшую близость.
Нейросеть тут вообще не причем, тупой алгоритм сравнения таргета с базой данных, а  говорильни столько, что чуть не технологии 3000го года.
Нейросеть разве, что быстрее может сопоставлять.

Со звуком сложнее, мешанина синусов и их амплитуд во времени.

... и добавил:

Цитировать
Вот я слышал мнение, что очень опытный звукорежиссер способен и на перделках услышать что-то такое, что не опытный только на мониторах услышит, и то не факт...

Слышим  :hmmm:
Вопрос в том, что слышим и на сколько это важно обычному слушателю.

... и добавил:

Цитировать
В данном случае техническую разрешающую способность заменяет - накопленный опыт
Именно так, тренировка и слуха и мозга.

... и добавил:

Цитировать
В плане нейросети - накопление опыта - это и есть то самое "научение" ее, формирование у нее нужных связей со всеми отклонениями...
Т.е. тут еще зависит и от того - сколь долго и кропотливо дрючить нейросеть, пока она не научится различать по каким-то там нюансам..

Опять таки, действительно, чтобы узнать какое-то явление - мозгу нужно время... т.е. басист в таком случае бы дергал струну спустя там, послекунды - типа услышал что стучит бочка, но это еще не точно, прошло еще немного времени - а ну да - это точно был удар бочки, значит можно дернуть струну...
Но в реальности ведь не так, потому что нейросеть в наших головах уже давно заранее "знает" что там должно стучать и играть, и реагирует уже на автопилоте при самом раннем начале атаки. Мозг заранее ожидает - в какое мгновение должна стукнуть бочка - и дергает струну едва возникает малейший признак ожидаемого, а чаще и вовсе уже не слушая - так сказать - "войдя в поток"
То-исть, "вхождение в поток", "на автопилоте" - это когда нейросеть заранее знает уже все что должно произойти, и уже не анализирует детально, а действует тупо по сформированному совокупному "Знанию"

Ну так "нейросеть" не придумали от гениальности, а сперли из природных биологических систем, примитивную её часть.
Хотя она и рядом не стояла с биологической сетью.

... и добавил:

Тут еще такая фишка...
Прежде чем басист будет "дергать струну" или чего "иное"  ;D...
Мозг уже готов воспринимать колебания в виде осмысленной мелодии, причем это касается не только человека социума, отшельник который никогда не видел музыкальных инструментов так же отреагирует на "музыкальную" последовательность звуков. На очень сложные вряд-ли, а на простые точно.
Вот этот момент весьма интересен, а комповая сеть лишенная сенсоров и человеческой реакции на внешнюю информацию не определит (если её намеренно не учить) что музыка, а что тупо шум.
Т.е. восприятие музыкальной составляющей это часть нашего генетического кода. (мое мнение... )
« Последнее редактирование: Ноября 04, 2020, 17:24:23 от Returned to trash »

Оффлайн Macsimpain

  • Ветеран форума
  • ******
  • Сообщений: 3467
  • Follow your Dream
Не, ну это понятно, что чтобы научить нейросеть различать музыкальные понятия из всего-лишь переменного во времени напряжения - нужно сперва как-то так этот поток трансформировать, чтобы... ну фиг знает, вот лица же научили различать, и не только лица...

Лица, которые можно различить, чтобы по ним идентифицировать "владельца", они уже есть в базе. По сути мы все там есть, паспорта то получали ;D Если нет - хрен кто чё различит. Вроде так

Т.е. для работы со звуком в нейросеть тоже придется внедрить инфу в некую базу, а вот как это сделать - это уже вопрос )
« Последнее редактирование: Ноября 04, 2020, 19:46:00 от Macsimpain »

Оффлайн Винтик на отдыхе Автор темы

  • Эксперт
  • *****
  • Сообщений: 2868
Короче... вооще-то всё последнее время я чота как-то весьма хреново себя ощущаю в плане здоровья...

А вот сейчас чую - надо себя как-то спасать...

Какой-то ментальный импульс чутка добавить

Поэтому, замутил вот этот тест просто чтобы что-то "ЗАМУТИТЬ"...

Но если вы найдете хоть акие-то мотивы там... посранивать, поделиться впечатлениями от сравнений... возможно это меня как-то стимульнёт, и я таки вынырну из того омута психо-физиологического...
Как то последнее время - совсем ничего не охота, жить не хоцца, и вооюще... весь мир всё и вся - видится тупо - в труху!

Поэнтому - надо делать - хоть что-то.... хоть что-нибудь  :crazy:


« Последнее редактирование: Ноября 07, 2020, 01:44:29 от Винтик на отдыхе »

Оффлайн NSb-2

  • Живу на форуме
  • *******
  • Сообщений: 7398
  • Shit in - Shit out
    • pornhub.com
Во втором примере верха больше  :crazy:

... и добавил:

Цитировать
Короче... вооще-то всё последнее время я чота как-то весьма хреново себя ощущаю в плане здоровья...

Осень...   Кушай фрукты.

Оффлайн Винтик на отдыхе Автор темы

  • Эксперт
  • *****
  • Сообщений: 2868
Это да... самое мной нелюбимое время года - поздняя осень, студено, днем смурняк да еще и рано темнеет
Как только начнет идти снег - сразу все поменяется на предновогоднее, совсем другие эмоции..  :hitrez:

Оффлайн NSb-2

  • Живу на форуме
  • *******
  • Сообщений: 7398
  • Shit in - Shit out
    • pornhub.com
Это да... самое мной нелюбимое время года - поздняя осень, студено, днем смурняк да еще и рано темнеет
Как только начнет идти снег - сразу все поменяется на предновогоднее, совсем другие эмоции..  :hitrez:

Аналогично...
Жду снег - веселей и красившее будет. :crazy:

Оффлайн Vasik_NJ

  • Живу на форуме
  • *******
  • Сообщений: 8079
  • GuitarPlayer.Ru fan!
Аналогично...
Жду снег - веселей и красившее будет. :crazy:
До первого массового выгула собакенов...  :crazy:

У нас сегодня было 24 градуса тепла в тени, а так день довольно солнечный - поехали на стадион с мелким сыном  и я надел было жилетку, но потом пришлось её оставить в машине и даже в одной майке с коротким рукавом вспотел прилично, пока играли в мяч.
Я реально не припомню что бы было так тепло в Ноябре, хотя в этих местах прожили уже 18 лет - в получасе езды на запад от города Нью-Йорк.
Завтра тоже обещают 23 градуса, солнечный день и ещё несколько тёплых дней после - надо оттянуться  :)
« Последнее редактирование: Ноября 08, 2020, 03:51:46 от Vasik_NJ »

Оффлайн NSb-2

  • Живу на форуме
  • *******
  • Сообщений: 7398
  • Shit in - Shit out
    • pornhub.com
Vasik_NJ,
Климат не спешно меняется...

Оффлайн Винтик на отдыхе Автор темы

  • Эксперт
  • *****
  • Сообщений: 2868
Внес ряд изменений в мои ассиметричные фильтры "AF-Series" для Reaktor 6

На днях выложу... на РММ
Если кто и здесь таки осилил установку этой проги, то и тут могу запостить как-от-нефиг-делать...

Есть одно новшество, которое превращает эти фильтры в очень даже экспериментальные такие штуки... реально новаторские..





Оффлайн NSb-2

  • Живу на форуме
  • *******
  • Сообщений: 7398
  • Shit in - Shit out
    • pornhub.com
Дизайн - атличный! :crazy: :crazy: :crazy:

Оффлайн Винтик на отдыхе Автор темы

  • Эксперт
  • *****
  • Сообщений: 2868
А в чем принципиальное новшество догадался?  ;)

Там ведь и по картинкам уже видно
Учитывая что это фильтры...

Хотя, конечна, кое что роднит эти фильтры с динамическими, но разница там существенная!
Из-за этой разницы уже трудно понять что это - устройства эквализации, устр. дин. обработки, или же сатураторы..............

Скажу заранее, что если обрабатывать моно-сигнал, и на, скажем, - левый канал - подавать сигнал обрабатываемый, а на правый - сигнал "управляющий", то..............................
Я пока и сам не знаю всего что можно тут напридумывать, поле для экспериментов там - огромадное!
« Последнее редактирование: Ноября 10, 2020, 19:32:54 от Винтик на отдыхе »