» Håll dig ajour kring AI · En AI-skapad och ständigt föränderlig nyhetstidning om AI. Idag har vår robot sammanfattat 152 nyhetshändelser. Upptäck gärna vår kurs AI på jobbet förresten. «
Ny AI-teknik kan förstå och resonera kring ljudingångar
Forskare från Tsinghua University och ByteDance har utvecklat ett nytt artificiellt intelligenssystem, SALMONN, som tillåter maskiner att förstå och resonera kring ljudingångar som tal, ljud och musik. SALMONN beskrivs som en stor språkmodell (LLM) som möjliggör tal-, ljudhändelse- och musikinmatningar. Systemet kombinerar två specialiserade AI-modeller, en för talbearbetning och en för allmän ljudbearbetning, till en enda LLM som kan generera textrespons på ljuduppmaningar. SALMONN har också visat korsmodala förmågor, som att följa talade instruktioner, utan någon explicit träning i tal-till-text-översättning.
har gått vår kurs "AI på jobbet".
