Një memo e brendshme e Meta-s sinjalizon rikthimin e inteligjencës artificiale pas një viti të vështirë
Meta ka përfunduar para-trajnimin e modelit të saj të ri të inteligjencës artificiale me emrin e koduar “Avocado”, sipas një memo të brendshme.
Modeli është modeli bazë i para-trajnuar më i aftë i kompanisë, raporton The Information, duke cituar një dokument të brendshëm. Para-trajnimi është faza e parë e zhvillimit të inteligjencës artificiale, ku një model mëson modele dhe marrëdhënie themelore nga sasi të mëdha të dhënash.
Sipas memorandumit nga Megan Fu, një menaxhere produkti në Meta Superintelligence Labs, Avokado ka performancë më të mirë se modelet bazë më të mira që janë të disponueshme falas. Në njohuri, perceptim vizual dhe performancë shumëgjuhëshe, ai madje mund të konkurrojë me modelet kryesore të trajnuara plotësisht – edhe pse Avokado nuk e ka kaluar ende fazën e dytë të trajnimit. Kjo fazë, e quajtur pas-trajnim, përpunon modelet për detyra specifike.
Modeli gjithashtu përdor fuqinë llogaritëse shumë më me efikasitet: dhjetë herë më efikas se Maverick dhe njëqind herë më efikas se Behemoth, dy modele të mëparshme të Meta-s. Meta i arriti këto përfitime nëpërmjet të dhënave më të mira të trajnimit, përmirësimeve në bazën teknike dhe ndryshimeve në metodën e trajnimit.
Këto përparime kanë rëndësi për Meta-n, e cila pati probleme të konsiderueshme me modelin e saj Llama 4 në vitin 2025. Publikimi u vonua disa herë, testet e performancës u manipuluan dhe zhvilluesit u zhgënjyen me performancën pas lançimit. Këto vështirësi çuan në një riorganizim të madh të divizionit të IA-së, përfshirë largimin e Yann LeCun. Meta investoi 14.3 miliardë dollarë në startup-in Scale AI dhe solli CEO-n e saj Alexandr Wang për të udhëhequr një njësi të re të IA-së të quajtur Meta Superintelligence Labs.
Meta tani po investon shuma rekord në përpjekjet e saj për IA-në: për vitin 2026, kompania pret shpenzime kapitale midis 115 dhe 135 miliardë dollarë – rreth 73 përqind më shumë se në vitin 2025. Drejtori i Teknologjisë Andrew Bosworth tha së fundmi në Forumin Ekonomik Botëror në Davos se modelet e IA-së të Metës janë shumë të mira, por ende kanë nevojë për trajnim të konsiderueshëm pas trajnimit. CEO Mark Zuckerberg e përsëriti këtë pikëpamje në thirrjen e fundit të publikimit të të ardhurave. Meta planifikon të publikojë modele të reja vazhdimisht gjatë gjithë vitit. Sipas thashethemeve, Meta do të largohet nga qasja me burim të hapur e modeleve të saj Llama me Avocado. Një model i fokusuar në aplikacionet vizuale me emrin e koduar Mango është gjithashtu në zhvillim e sipër.