Microsoft i jep Copilot një zë dhe vizion në ridizajnimin e tij më të madh deri më tani

Microsoft po zbulon sot një rishikim të madh të përvojës së tij Copilot, duke shtuar aftësitë e zërit dhe vizionit për ta transformuar atë në një asistent më të personalizuar të AI. Siç e zbulova ekskluzivisht në buletinin tim të Notepad javën e kaluar, aftësitë e reja të Copilot përfshijnë një modalitet të prezantuesit virtual të lajmeve për t’ju lexuar titujt, aftësinë që Copilot të shohë atë që po shikoni dhe një veçori zanore që ju lejon të flisni me Copilot në një mënyrë e natyrshme, shumë si modaliteti i avancuar i zërit i OpenAI.

Copilot po ridizajnohet në celular, ueb dhe aplikacionin e dedikuar Windows në një përvojë përdoruesi që bazohet më shumë në karta dhe duket shumë e ngjashme me punën që ka bërë Inflection AI me asistentin e tij të AI të personalizuar Pi. Microsoft punësoi një grup njerëzish nga Inflection AI në fillim të këtij viti, duke përfshirë bashkëthemeluesin e Google DeepMind, Mustafa Suleyman, i cili tani është CEO i Microsoft AI. Ky është ndryshimi i parë i madh i Suleyman në Copilot që kur mori përsipër anën e konsumatorit të asistentit të AI.

“Në Microsoft AI, ne po krijojmë një shoqërues të AI për të gjithë,” thotë Suleyman në një letër të hapur sot. “Unë me të vërtetë besoj se mund të krijojmë një epokë më të qetë, më të dobishme dhe mbështetëse të teknologjisë, krejtësisht ndryshe nga çdo gjë që kemi parë më parë.”

Copilot tani duket ndryshe nga çdo gjë që kam parë nga Microsoft më parë, me një ndërfaqe që është një largim i madh nga ajo që ekziston tani. Është shumë më e ngrohtë, me një faqe të personalizuar Copilot Discover që është më e dobishme dhe më tërheqëse sesa një kërkesë për futjen e tekstit për një chatbot. Microsoft po e personalizon të gjithë faqen kryesore të Copilot bazuar në historikun tuaj të bisedave dhe me kalimin e kohës, ajo do të përfshijë kërkime të dobishme, këshilla dhe informacione përkatëse.

Microsoft ndau versionin e tij të konsumatorit të Copilot për ekipin e Suleyman në fillim të këtij viti, dhe qartësisht i lejohet kompanisë të eksperimentojë më shumë me personalitetin dhe personalizimin. “ Ajo që kemi mësuar nga ekipi i Pi dhe njerëzit e [Inflection AI] që erdhën është se ata kanë pasur gjithmonë vëmendje ndaj detajeve për nevojat e klientëve,” thotë Yusuf Mehdi, nënkryetar ekzekutiv dhe shefi i marketingut për konsumatorët. në Microsoft, në një intervistë me Shkence.info. ” Mënyra se si ata dëgjojnë dhe çfarë kanë mësuar nga këto biseda të gjata në atë hulumtim ka ndikuar sigurisht në atë që kemi bërë këtu.”

Përtej pamjes dhe ndjesisë së këtij Copilot të ri, Microsoft po rrit gjithashtu punën e tij në vizionin e tij për një shoqërues AI për të gjithë duke shtuar aftësi zanore që janë shumë të ngjashme me atë që OpenAI ka prezantuar në ChatGPT. Tani mund të bisedoni me asistentin e AI, t’i bëni pyetje dhe ta ndërprisni atë si gjatë një bisede me një mik ose koleg. Copilot tani ka katër opsione zanore për të zgjedhur dhe ju inkurajoheni të zgjidhni një kur përdorni për herë të parë këtë përvojë të përditësuar të Copilot.

“Ne po bëjmë një bast të madh për zërin,” thotë Mehdi. “Kur e përdorni atë me mënyrën se si e kemi projektuar, ju me të vërtetë filloni ta lini veten dhe të bëni biseda. Më pas ju i shihni vezullimet se ku do të shkojmë afatgjatë, me vizionin ku AI mund t’ju ndihmojë në të vërtetë dhe të shihni se çfarë shihni nëse dëshironi.”

Copilot Vision është basti i dytë i madh i Microsoft me këtë ridizajnim, duke i lejuar asistentit të AI të shohë atë që shihni në një faqe interneti që po shikoni. Ju mund t’i bëni pyetje në lidhje me tekstin, imazhet dhe përmbajtjen që po shikoni, dhe kombinuar me veçoritë e reja Copilot Voice, ai do të përgjigjet në një mënyrë të natyrshme. Ju mund ta përdorni këtë veçori ndërsa jeni duke blerë në ueb për të gjetur rekomandime për produktet, duke e lejuar Copilot t’ju ndihmojë të gjeni opsione të ndryshme.

Seancat e Copilot Vision janë të zgjedhura dhe kalimtare, dhe Microsoft thotë se asnjë nga përmbajtjet me të cilat angazhohet Copilot Vision nuk ruhet ose përdoret për trajnim. Kjo përvojë e re nuk do të funksionojë ende në të gjitha faqet e internetit, sepse Microsoft ka vendosur kufizime në llojet e faqeve të internetit me të cilat punon Copilot Vision. “Ne po fillojmë me një listë të kufizuar të uebsajteve të njohura për të siguruar që të jetë një përvojë e sigurt për të gjithë,” thotë ekipi i Copilot. Gjatë shikimit paraprak, Copilot Vision nuk do të funksionojë as në përmbajtje me mure pagese dhe të ndjeshme.

Pavarësisht mohimeve, Microsoft ka qartësisht një vizion afatgjatë për këto veçori të reja zëri dhe vizioni në Copilot. Një demonstrim tregon Copilot Vision duke u përdorur për të parë fotot e recetave të vjetra të shkruara me dorë, duke ndihmuar për të shpjeguar se çfarë është ushqimi dhe duke ofruar këshilla se sa kohë duhet për të bërë recetën. Microsoft demonstroi një përvojë të ngjashme ndihmëse për lojërat Xbox në fillim të këtij viti, duke treguar se si Copilot mund t’ju ndihmojë të lundroni përmes Minecraft.

Kjo fazë tjetër e Copilot përfshin gjithashtu Copilot Daily, një përmbledhje audio të lajmeve dhe motit që Copilot e lexon sikur të ishte një spirancë e CNN. Është krijuar si një klip i shkurtër që mund ta dëgjoni në mëngjes dhe përdor vetëm përmbajtje nga ofruesit e lajmeve dhe motit që kanë autorizuar Copilot për të përdorur përmbajtjen e tyre. Microsoft po punon fillimisht me Reuters, Axel Springer, Hearst dhe Financial Times, me plane për të shtuar më shumë burime me kalimin e kohës.

Copilot gjithashtu mund të trajtojë pyetje më komplekse falë modeleve më të fundit të OpenAI. Think Deeper është një veçori e re në Copilot që i lejon asistentit të marrë më shumë kohë për t’u përgjigjur, duke e lejuar atë të japë përgjigje hap pas hapi për pyetjet komplekse. Është krijuar për të funksionuar më mirë kur po përpiqeni të krahasoni dy opsione krah për krah, si për shembull, “A duhet të shkoj në Nju Jork apo San Francisko?”

Think Deeper është ende herët në zhvillim dhe Microsoft po e vendos atë në Copilot Labs, një mënyrë e re për të testuar veçoritë eksperimentale që kompania është ende duke zhvilluar. Copilot Vision do të jetë gjithashtu pjesë e veçorisë së Labs fillimisht dhe pjesëmarrësit do të jenë në gjendje të japin komente mbi përvojat. Microsoft po ecën qartë me kujdes me Copilot Vision pas reagimit të ashpër rreth çështjeve fillestare të sigurisë dhe privatësisë së Recall. Microsoft zbuloi javën e kaluar se Recall është rishikuar me opsione të përmirësuara të sigurisë dhe privatësisë, dhe madje do të jeni në gjendje ta çinstaloni plotësisht funksionin ose të mos e aktivizoni në radhë të parë.

Kjo përvojë e përditësuar e Copilot do të jetë e disponueshme sot në aplikacionet celulare iOS dhe Android, në ueb në copilot.microsoft.com dhe përmes aplikacionit Copilot Windows. Copilot Voice do të jetë fillimisht i disponueshëm në anglisht në Australi, Kanada, Zelandën e Re, MB dhe SHBA, përpara se të zgjerohet në më shumë rajone dhe gjuhë në të ardhmen. Copilot Daily është i kufizuar në SHBA dhe MB përpara se të zgjerohet diku tjetër, dhe Copilot Vision do të kufizohet në një numër abonentësh Copilot Pro në SHBA.

Nëse, si unë, po pyesni se ku do të shkojë më pas Copilot, CEO i ri i AI i Microsoft-it ka disa ide madhështore. “Me kalimin e kohës do të përshtatet me sjelljet tuaja dhe do të zhvillojë aftësi të ndërtuara rreth preferencave dhe nevojave tuaja. Ne nuk po krijojmë një mjet statik aq shumë sa po krijojmë një ndërveprim dinamik, emergjent dhe në zhvillim”, thotë Sulejman. “Do t’ju shoqërojë në takimin e mjekut, duke mbajtur shënime dhe duke ndjekur në kohën e duhur. Do të ndajë ngarkesën e planifikimit dhe përgatitjes për festën e ditëlindjes së fëmijës suaj. Dhe do të jetë aty në fund të ditës për t’ju ndihmuar të mendoni për një vendim të ndërlikuar të jetës.”