Transkrypcja muzyki polifonicznej nie wydaje się obecnie stanowić rozwiązania problemu.
Co powiesz na odwrót niewielkiej części problemu. Czy są jakieś cechy spektralne (z STFT), które można wykorzystać do wyeliminowania niektórych akordów muzycznych z przestrzeni prawdopodobieństwa? (np. ten fragment dźwięku najprawdopodobniej nie zawiera żadnego akordu C # lub jakiegokolwiek pomniejszonego akordu mniejszego, lub jest to pojedyncza nuta, nie akord itp.)
Załóżmy, że fragment dźwięku jest mniej więcej stacjonarny (usunięto przejściowy atak itp.) I że podteksty dla większości lub wszystkich pojedynczych nut są bardzo prawdopodobne. (I to pytanie nie dotyczy odwróconych akordów).
music
frequency-spectrum
hotpaw2
źródło
źródło
Odpowiedzi:
Problem transkrypcji muzyki polifonicznej spotkał się w ostatnich latach z dużą uwagą w środowisku naukowym i chciałbym powiedzieć, że w przypadku polifonii na jednym instrumencie (fortepian, gitara itp.) Wyniki są bardzo dobre. Oto kilka artykułów / autorów, którzy głęboko przyjrzeli się temu problemowi. Derry Fitzgerald zrobił dużo w tej dziedzinie, wiele jego prac nad NMF nad separacją źródeł daje dokładne transkrypcje. Anssi Klapuri jeszcze bardziej szczegółowo przyjrzał się problemowi wykrywania akordów w polifoniach wielu instrumentów. I na koniec, choć nieopublikowany, Mikel Gainza opracował bardzo dokładne algorytmy transkrypcji akordów dla muzyki komercyjnej, która wkrótce zostanie wydana w opartym na gitarach oprogramowaniu Riffstation. Publikacje w linkach tutaj powinny dać ci dobre wyobrażenie o tym, jak obecnie leży krajobraz transkrypcji muzyki polifonicznej.
źródło
Cóż, w tym celu STFT będzie zawierał tylko podstawowy składowy częstotliwości i inne częstotliwości, które są zbliżone do jego harmonicznych (choć nie dokładne, z powodu nieharmoniczności ). Znajdź piki w widmie i sprawdź, czy wyższe częstotliwości są bliskie całkowitym wielokrotnościom najniższej obecnej częstotliwości. Jeśli występują częstotliwości nieharmoniczne, to nie jest to pojedynczy ton.
(Ale co z instrumentami z brakującymi podstawowymi lub zasadniczo nieharmonicznymi rzeczami, takimi jak dzwonki? Co z dwoma instrumentami idealnie dopasowanymi do grania oktawy oddzielnie, więc ich partie w większości pokrywają się ze sobą? Czy chcesz wykryć to jako pojedynczą nutę lub dwie notatki?)
źródło