DDSP (differentierbar signalbehandling)
Idén att låta ett neuralt nät styra klassiska syntesbyggstenar i stället för att generera varje sampel självt.
Googles Magenta-grupp, med Jesse Engel i spetsen, presenterade DDSP 2020. Nätet förutsäger tonhöjd, styrkan på varje överton och formen på ett filtrerat brus, och en additiv synt plus en faltningsreverb gör det till ljud. Eftersom alla delar är deriverbara kan hela kedjan tränas ihop med gradientnedstigning. Fysiken i oscillatorer och filter behöver nätet inte lära sig — den är redan inbyggd.
Följden är modeller som är hundratals gånger mindre än WaveNet-liknande nät och som tränas på minuter av inspelat material. Paradnumret var klangöverföring: sjung en melodi och få tillbaka den som fiol eller flöjt. DDSP blev ingen produkt i sig, men tanken att kombinera inlärning med beprövad signalbehandling har spridit sig till röstkodekar och pluginer.