Sistemi i ri i zërit me AI nga Elevenlabs mundëson ndërveprime më të rrjedhshme përmes analizës në kohë reale
Elevenlabs ka publikuar Conversational AI 2.0, një sistem të përditësuar që u lejon agjentëve të saj të trajtojnë njëkohësisht të folurit dhe tekstin për ndërveprime më fluide.
Përditësimi prezanton një model të ri bisede që, sipas Elevenlabs, analizon sinjalet e bisedës si pauzat dhe tingujt mbushës (“ëm,” “ah”) në kohë reale. Sistemi përdor këto sinjale për të përcaktuar se kur duhet të flasë ose të qëndrojë i heshtur. Për shembull, nëse një përdorues ndalet për të kërkuar diçka, agjenti pret në vend që të përgjigjet menjëherë.
Në versionet e mëparshme, përdoruesit duhej të ndërronin gjuhët manualisht. Platforma e përditësuar tani e zbulon gjuhën e folur automatikisht dhe i përshtat përgjigjet e saj në përputhje me rrethanat, gjë që u lejon përdoruesve të kalojnë midis gjuhëve gjatë një ndërveprimi të vetëm.
Sistemi mbështet gjithashtu komunikimin multimodal. Përdoruesit dhe agjentët mund të bashkëveprojnë përmes zërit, tekstit ose të dyjave njëkohësisht. Sipas Elevenlabs, kjo ndihmon në ruajtjen e vazhdimësisë kur përdoruesit kalojnë nga të folurit në të shkruar.
Një nga përditësimet më thelbësore është integrimi i Retrieval Augmented Generation (RAG) direkt në agjentin zanor. Kjo u lejon agjentëve të hyjnë në bazat e të dhënave të kompanisë në kohë reale, duke zvogëluar vonesën dhe duke mbrojtur privatësinë e përdoruesit.
Me një përkufizim të unifikuar të agjentit, kompanitë mund të menaxhojnë në mënyrë qendrore sjelljen e dialogut, burimet e njohurive dhe kanalet e komunikimit. Ky konfigurim, i kombinuar me RAG, ka për qëllim të përmirësojë shërbimin ndaj klientit dhe ta bëjë më të lehtë automatizimin dhe shkallëzimin e rrjedhave të punës të bazuara në zë. Shembuj të rasteve të përdorimit përfshijnë asistentë mjekësorë që marrin udhëzime trajtimi ose agjentë mbështetës që qasen në informacionin e azhurnuar të produktit gjatë një telefonate.
Përditësimi prezanton gjithashtu një funksion “Thirrje në Grumbull”, i cili u lejon kompanive të automatizojnë thirrjet masive për njoftime, anketa ose mesazhe të personalizuara. Platforma mbështet thirrjet hyrëse dhe dalëse dhe integrohet me sistemet e lidhjes SIP.
Publikimi sjell opsione të reja përputhshmërie që synojnë klientët e ndërmarrjeve. Versioni 2.0 është plotësisht në përputhje me HIPAA, duke e bërë atë të përshtatshëm për aplikacionet e kujdesit shëndetësor. Elevenlabs gjithashtu ofron rezidencë opsionale të të dhënave në BE për të ndihmuar organizatat të adresojnë kërkesat e sovranitetit të të dhënave.