Сообщается, что Microsoft разрабатывает новую собственную модель ИИ, и это происходит впервые с тех пор, как она инвестировала в OpenAI значительные средства, вложив более 10 миллиардов долларов, чтобы использовать модели ИИ стартапа в своих собственных продуктах и оставаться впереди, пока конкуренты не догонят ее.
MAI-1 — собственный проект Microsoft.
Говорят, что новая модель достаточно велика, чтобы конкурировать с моделями Alphabet, материнской компании Google, и OpenAI.
Согласно сообщению The Information, новая модель внутри Microsoft называется MAI-1, и недавно нанятый Мустафа Сулейман возглавляет проект. Это тот же человек, который стал соучредителем DeepMind, который позже был куплен Google, а совсем недавно он был генеральным директором другого стартапа под названием Inflection.
Но в отчете утверждается, что это не модель искусственного интеллекта Inflection, но компания может использовать наборы обучающих данных и другие сопутствующие технологии стартапа для этой самой модели Microsoft, которая полностью отличается от тех, которые Inflection уже выпустила.
Здесь следует помнить, что Microsoft, прежде чем нанять Сулеймана, потратила 650 миллионов долларов на покупку всех прав на Inflection, а также наняла большую часть своих сотрудников.
Говорят, что MAI-1 будет совсем другим существом и будет намного крупнее, чем меньшие модели Microsoft, которые он обучал раньше и которые имеют бесплатный исходный код. По словам людей, знакомых с предметом, модели потребуется больше вычислительных ресурсов и обучающих данных, поэтому ее разработка определенно будет дороже.
Гораздо более масштабное предприятие
Для сравнения, модели меньшего размера, обученные компаниями Mistral и Meta, имеют 70 миллиардов параметров, которые можно грубо назвать шкалой для измерения размера модели ИИ, а GPT4 OpenAI, как говорят, имеет более 1 триллиона параметров. А МАИ-1 будет иметь около 500 миллиардов параметров.
Но сами по себе параметры не являются надежным средством измерения модели ИИ, поскольку некоторые из последних моделей Phi с открытым исходным кодом от Microsoft, как говорят, работают наравне с моделями, в 10 раз превышающими их размер.
Phi-3 Mini, выпущенный Microsoft в прошлом месяце, относится к серии, меньшей по размеру, и компания стремится охватить более широкую клиентскую базу своими более дешевыми вариантами.
Также сообщается, что Microsoft закупает большое количество серверов или, скорее, кластеров серверов со встроенными графическими процессорами Nvidia и огромным количеством наборов данных для обучения модели.
Хотя, когда Microsoft объявила, что использует чат-бота OpenAI ChatGPT в своем поиске Bing, многие аналитики назвали это «моментом для iPhone» и были слишком оптимистичны в отношении его влияния, первоначально она дала Bing только один или два процента дополнительной доли поиска по сравнению с Google.
Однако последний отчет Search Engine Journal за апрель показывает, что впервые доля поиска Google упала более чем на 4% за один месяц, поскольку конкуренты Bing и Yahoo увеличили свою долю именно на рынке США.
Но похоже, что для Microsoft стало иметь смысл вкладывать миллиарды в OpenAI, и теперь благодаря успеху собственной модели Phi, если она инвестирует в более крупную модель, которая тоже имеет смысл.