Hvordan Googles 'Hum To Search' Song Identification fungerer

Hvilken Film Å Se?
 

Google lanserte nylig en ny 'Hum To Search' -funksjon som raskt kan identifisere en sang basert på nynning. Her er hva du trenger å vite.





Forrige måned, Google lanserte en funksjon som lar brukerne nynne en sang for å søke etter en sang. Denne melodistil metoden for å søke etter musikk er ikke helt ny, siden apper som Shazam lar brukerne slå opp sanger de hører på radioen. Imidlertid tar Google ting et skritt videre ved å la brukerne bare nynne sangen som de ikke helt husker ordene til.






Innovatørene hos Google har jobbet med musikkgjenkjenningsteknologi i mange år nå. Google lanserte Now Playing på Pixel 2 i 2017, en funksjon som førte til musikkgjenkjenning med lav effekt til mobile enheter. Et år senere ble den samme teknologien introdusert for SoundSearch-funksjonen i Google-appen. Spol frem til 2020, og Google har funnet en måte å strømlinjeforme søket etter sanger på spissen av brukerens tunge.



Relatert: Hvordan overbelaste Google-søkeresultatene dine

Brukere kan åpne den siste versjonen av Google app, trykk på mikrofonikonet og si ' hva er denne sangen? 'eller klikk på' Søk etter en sang '-knappen, og begynn deretter å nynne i 10-15 sekunder. Googles maskinlæringsalgoritme tar brummen og prøver å matche den med potensielle sanger. Den nye funksjonen er tilgjengelig gjennom Google Assistant ved å bare si ' Hei Google, hva er denne sangen? 'og så nynne melodien. Den nye teknologien er for tiden tilgjengelig på 20 forskjellige språk på Android, men bare på engelsk på iOS.






Vitenskapen bak Googles 'Hum To Search'

Google sier at Hum To Search-teknologien fungerer i kontrast til andre tilnærminger til melodisøk, som prøver å matche en melodi til en database med eksisterende melodiversjoner av sangen, i stedet for å finne sangen direkte. Med Googles metode , teknologien ' produserer en innebygging av en melodi fra et spektrogram av en sang uten å generere en mellomrepresentasjon . ' I utgangspunktet skal denne tilnærmingen være i stand til å matche en nynnet melodi direkte til originalopptaket, uten å måtte matche den til en annen nynnet versjon. Google modifiserte musikkgjenkjenningsmodellene som ble brukt i tidligere teknologier, Now Playing og SoundSearch, slik at den kan fungere med nynnede opptak. Det innebar å trene maskinlæringsteknologien for å produsere innebygninger for lydpar som inneholder samme melodi, selv om de er laget med forskjellige instrumenter eller sangstemmer. Resultatet, sier Google, er et system som når et høyt nøyaktighetsnivå med en sangdatabase på over en halv million.



Alt dette legger opp til at Google vitenskapelig har funnet en måte å bekjempe problemet med å ha sanger som man ikke helt husker helt. Riktignok er det kanskje ikke det mest presserende problemet i 2020, men mange vil være kjent med opplevelsen av å prøve å huske navnet på en sang og ha den fast i hodet hele dagen, eller lenger. Selv om en bruker ikke kan huske tekstene, eller til og med melodien utover et grunnleggende brum, har Google nå en løsning.






Kilde: Google