微软秘密开发首个千亿大模型,竟由OpenAI对手操刀!网友:你不要奥特曼了?

AIGC动态8个月前发布 ai-front
792 0 0
微软秘密开发首个千亿大模型,竟由OpenAI对手操刀!网友:你不要奥特曼了?

 

文章摘要


【关 键 词】 人工智能微软MAI-1语言模型技术发展

微软正在开发一个名为MAI-1的新型人工智能模型,这标志着该公司在人工智能领域的重大发展。MAI-1将是一个具有约5000亿参数的大型语言模型,位于OpenAI的GPT-3和GPT-4之间,旨在提供比现有开源模型更高精度的响应,但低于OpenAI的旗舰模型。这个新模型的开发由前谷歌人工智能领导者、AI初创公司Inflection的CEO穆斯塔法·苏莱曼负责监督。

微软对MAI-1的投资表明,该公司正在追求“双重轨道”战略,旨在开发既可廉价构建到应用程序中又可在移动设备上运行的小型语言模型,以及更大、更先进的人工智能模型。这与苹果的策略相似,苹果也发布了八款针对设备使用的小型AI语言模型。

MAI-1的开发可能建立在Inflection的技术之上。今年3月,微软以6.5亿美元收购了Inflection的大部分员工和知识产权,并聘请苏莱曼领导一个新的消费者人工智能部门。这个部门将负责面向消费者的产品,包括微软的Copilot、Bing、Edge和GenAI,并将这些产品归入一个名为Microsoft AI的团队。

微软可能最早在本月晚些时候的Build开发者大会上展示MAI-1。为了训练该模型,微软一直在分配大量配备Nvidia GPU的服务器,并编译各种来源的训练数据,包括OpenAI的GPT-4生成的文本和公共互联网数据,还可能会使用来自Inflection的训练数据和某些其他资产来支持MAI-1。

MAI-1的确切用途尚未确定,其最理想的用途将取决于其性能。如果该模型确实具有5000亿个参数,那么在消费类设备上运行就太复杂了。这意味着,微软很可能会在其数据中心部署MAI-1,在这里大语言模型可以集成到Bing和Azure等服务中。

微软开发MAI-1大模型,也凸显了其试图独立于OpenAI等人工智能厂商去探索AI开发的愿望。此前,微软一直致力于在其Windows、Office软件和网络安全工具等产品中推出人工智能助手,但多采取与外部企业合作的方式。去年,微软向ChatGPT的制造商OpenAI投资了130亿美元,并将其技术快速集成到产品和数字体验中。目前,OpenAI的技术为微软的许多生成式AI功能提供支持,包括Azure、Copilot和内置Windows的聊天机器人。

微软还投资了其他人工智能初创公司,包括向法国人工智能初创公司Miraculous AI投资20亿欧元(约合21亿美元),将Miraculous AI的大型语言模型(LLM)在Azure云计算平台上进行托管。今后,这一切可能都会有所变化,微软或将开始推动自研大模型在各产品中的应用。据悉,苏莱曼领导的部门将接手把AI版本的Copilot集成到Windows操作系统中,以及开展增强生成式AI在其Bing搜索引擎中的使用等项目。

原文和模型


【原文链接】 阅读原文 [ 1932字 | 8分钟 ]
【原文作者】 AI前线
【摘要模型】 moonshot-v1-32k
【摘要评分】 ★★★★☆

© 版权声明
“绘蛙”

相关文章

暂无评论

暂无评论...