Se pare că Microsoft dezvoltă un nou model AI intern și este pentru prima dată de când a investit masiv în OpenAI, cu peste 10 miliarde de dolari, pentru a utiliza modelele AI ale startup-ului în propriile produse și a rămâne în frunte până când concurenții ajung din urmă.
MAI-1 este un proiect intern al Microsoft
Se spune că noul model este suficient de mare pentru a concura cu Alphabet, care este compania-mamă a Google, și OpenAI.
Noul model se numește MAI-1 intern la Microsoft, iar recent angajatul Mustafa Suleyman conduce proiectul, potrivit unui raport al The Information. El este același tip care a co-fondat DeepMind, care a fost cumpărat ulterior de Google, iar foarte recent a fost CEO al unui alt startup numit Inflection.
Dar se pretinde în raport că nu este modelul AI al lui Inflection, dar compania poate folosi seturile de date de antrenament și alte tehnologii aferente de la pornire pentru acest model Microsoft, care este complet separat de cele pe care Inflection le-a lansat deja.
Ideea de reținut aici este că Microsoft, înainte de a-l angaja pe Suleyman, a investit 650 de milioane de dolari pentru a cumpăra toate drepturile asupra Inflection și a angajat, de asemenea, majoritatea membrilor personalului său.
Se spune că MAI-1 va fi un animal cu totul diferit și mult mai mare decât modelele mai mici Microsoft pe care le-a antrenat anterior și sunt sursă gratuită. Potrivit persoanelor familiarizate cu subiectul, modelul va avea nevoie de mai multe resurse de calcul și de date de antrenament, așa că va fi cu siguranță mai costisitor de dezvoltat.
O întreprindere mult mai mare
Pentru comparație, modelele mai mici antrenate de companiile Mistral și Meta au 70 de miliarde de parametri, care pot fi numiți aproximativ o scară pentru a măsura dimensiunea unui model AI, iar GPT4 al OpenAI se spune că are mai mult de 1 trilion de parametri. Și MAI-1 va avea în jur de 500 de miliarde de parametri.
Dar numai parametrii nu sunt o caracteristică fiabilă pentru a măsura un model AI, deoarece unele serii recente Phi de modele open source de la Microsoft se spune că au performanțe la egalitate cu modelele de 10 ori mai marile lor.
Phi-3 Mini, care a fost lansat luna trecută de Microsoft, este una dintre serii de dimensiuni mai mici, iar compania își propune să vizeze o bază mai largă de clienți cu opțiunile sale mai ieftine.
De asemenea, este raportat că Microsoft a achiziționat un număr mare de servere, sau mai degrabă grupuri de servere care au procesoare grafice Nvidia încorporate împreună cu cantități masive de seturi de date pentru a antrena modelul.
Deși, atunci când Microsoft a anunțat că furnizează chatbot-ul ChatGPT de la OpenAI în căutarea sa Bing, mulți analiști l-au numit un „moment iPhone” și au fost prea optimiști cu privire la impactul său, a acordat inițial doar unul sau două procente în plus de căutare Bing față de Google.
Cu toate acestea, cel mai recent raport Search Engine Journal din aprilie arată că, pentru prima dată, cota de căutare Google a scăzut cu peste 4% într-o singură lună, pe măsură ce concurenții Bing și Yahoo au câștigat cote în special pe piața din SUA.
Dar se pare că a început să aibă sens ca Microsoft să toarne miliarde în OpenAI și acum cu propriile modele Phi succes dacă investește într-un model mai mare care are și sens.