挑战OpenAI，微软自研5000亿参数绝密武器曝光！前谷歌DeepMind高管带队
不需要OpenAI，微软或许也会成为AI领头羊！外媒Information爆料称，微软内部正在开发自家首款5000亿参数的大模型MAl-1。这恰好是，纳德拉带领团队证明自己的时候到了。在向OpenAI投资100多亿美元之后，微软才获得了GPT-3.5/GPT-4先进模型的使用权，但终究不是长久之计。甚至，此前有传言称，微软已经沦落为OpenAI的一个IT部门。在过去的一年，每个人熟知的，微软在LLM方面的研究，主要集中在小体量phi的更新，比如Phi-3的开源。而在大模型的专攻上，除了图灵系列，微软内部还
不需要OpenAI，微软或许也会成为AI领头羊！
外媒Information爆料称，微软内部正在开发自家首款5000亿参数的大模型MAl-1。
这恰好是，纳德拉带领团队证明自己的时候到了。
在向OpenAI投资100多亿美元之后，微软才获得了GPT-3.5/GPT-4先进模型的使用权，但终究不是长久之计。
甚至，此前有传言称，微软已经沦落为OpenAI的一个IT部门。
在过去的一年，每个人熟知的，微软在LLM方面的研究，主要集中在小体量phi的更新，比如Phi-3的开源。
而在大模型的专攻上，除了图灵系列，微软内部还未透露半点风声。
就在今天，微软首席技术官Kevin Scott证实，MAI大模型确实正在开发中。
显然，微软秘密筹备大模型的计划，是为了能够开发出一款全新LLM，能够与OpenAI、谷歌、Anthropic顶尖模型竞争。
毕竟，纳德拉曾说过，「如果OpenAI明天消失了，也无关紧要」。
「我们有的是人才、有的是算力、有的是数据，我们什么都不缺。我们在他们之下，在他们之上，在他们周围」。
看来，微软的底气，就是自己。
自研5000亿MAI-1大模型
据介绍，MAI-1大模型由前谷歌DeepMind负责人Mustafa Suleyman，负责监督。
值得一提的是，Suleyman在加入微软之前，还是AI初创Inflection AI创始人兼CEO。
创办于2022年，一年的时间，他带领团队推出了大模型Inflection（目前已更新到了2.5版本），以及日活破百万的高情商AI助手Pi。
不过因为无法找到正确的商业模式，Suleyman和另一位联创，以及大部分员工，在3月份共同加入微软。
也就是说，Suleyman和团队负责这个新项目MAI-1，会为此带来更多的前沿大模型的经验。
还是要提一句，MAI-1模型是微软自研发的，并非从Inflection模型继承而来。
据两位微软员工称，「MAI-1与Inflection之前发布的模型不同」。不过，训练过程可能会用到其训练数据和技术。
拥有5000亿参数，MAI-1的参数规模将远远超出，微软以往训练的任何小规模开源模型。
这也意味着，它将需要更多的算力、数据，训练成本也是高昂的。
为了训练这款新模型，微软已经预留了一大批配备英伟达GPU的服务器，并一直在编制训练数据以优化模型。
其中，包括来自GPT-4生成的文本，以及外部来源（互联网公共数据）的各种数据集。
大小模型，我都要
相比之下，GPT-4曾被曝出有1.8万亿参数，Meta、Mistral等AI公司发布较小开源模型，则有700亿参数。
当然，微软采取的是多管齐下的策略，即大小模型一起研发。
其中，最经典的便是Phi-3了——一个能够塞进手机的小模型，而且最小尺寸3.8B性能碾压GPT-3.5。
Phi-3 mini在量化到4bit的情况下，仅占用大约1.8GB的内存，用iPhone14每秒可生成12个token。
在网友抛出「应该用更低成本训练AI，不是更好吗」的问题后，Kevin Scott回复到：
这并不是一个非此即彼的关系。在许多AI应用中，我们结合使用大型前沿模型和更小、更有针对性的模型。我们做了大量工作，确保SLM在设备上和云中都能很好地运作。我们在训练SLM方面积累了大量经验，甚至还将其中一些工作开源，供他人研究和使用。我认为，在可预见的未来，这种大与小的结合还将继续下去。
这表明，微软既要开发成本低廉、可集成到应用中，并能在移动设备上运行的SLM，也要开发更大、更先进的AI模型。
目前，微软自称是一家「Copilot公司」。得到AI加持的Copilot聊天机器人，可以完成撰写电子邮件、快速总结文件等任务。
而未来，下一步的机会在哪？
大小模型兼顾，正体现了充满创新活力的微软，更愿意探索AI的新路径。
不给OpenAI当「IT」了？
话又说回来，自研MAI-1，并不意味着微软将会抛弃OpenAI。
首席技术官Kevin Scott在今早的帖子中首先，肯定了微软与OpenAI合作五年的坚固「友谊」。
我们一直在为合作伙伴OpenAI建造大型超算，来训练前沿的AI模型。然后，两家都会将模型，应用到自家的产品和服务中，让更多的人受益。
而且，每一代新的超算都将比上一代，更加强大，因此OpenAI训出的每个前沿模型，都要比上一个更加先进。
我们将继续沿着这条路走下去——不断构建更强大的超算，让OpenAI能够训练出引领整个行业的模型。我们的合作将会产生越来越大的影响力。
前段时间，外媒曝出了，微软和OpenAI联手打造AI超算「星际之门」，将斥资高达1150亿美元。
据称，最快将在2028年推出超算，并在2030年之前进一步扩展。
包括此前，微软工程师向创业者Kyle Corbitt爆料称，微软正在紧锣密鼓地建设10万个H100，以供OpenAI训练GPT-6。
种种迹象表明，微软与OpenAI之间合作，只会更加牢固。
此外，Scott还表示，「除了与OpenAI的合作，微软多年来一直都在让MSR和各产品团队开发AI模型」。
AI模型几乎深入到了，微软的所有产品、服务和运营过程中。团队们有时也需要进行定制化工作，不论是从零开始训模型，还是对现有模型进行微调。
未来，还会有更多类似的这样的情况。
这些模型中，一些被命名为Turing、MAI等，还有的命名为Phi，我们并将其开源。
虽然我的表达可能没有那么引人注目，但这是现实。对于我们这些极客来说，鉴于这一切在实践中的复杂性，这是一个非常令人兴奋的现实。
解密「图灵」模型
除了MAI、Phi系列模型，代号「Turing」是微软在2017年在内部开启的计划，旨在打造一款大模型，并应用到所有产品线中。
经过3年研发，他们在2020年首次发布170亿参数的T-NLG模型，创当时有史以来最大参数规模的LLM记录。
到了2021年，微软联手英伟达发布了5300亿参数的Megatron-Turing（MT-NLP），在一系列广泛的自然语言任务中表现出了「无与伦比」的准确性。
同年，视觉语言模型Turing Bletchley首次面世。
去年8月，该多模态模型已经迭代到了V3版本，而且已经整合进Bing等相关产品中，以提供更出色的图像搜索体验。
此外，微软还在2021年和2022年发布了「图灵通用语言表示模型」——T-ULRv5和T-ULRv6两个版本。
目前，「图灵」模型已经用在了，Word中的智能查询（SmartFind），Xbox中的问题匹配（Question Matching）上。
还有团队研发的图像超分辨率模型Turing Image Super-Resolution（T-ISR），已在必应地图中得到应用，可以为全球用户提高航空图像的质量。
目前，MAI-1新模型具体会在哪得到应用，还未确定，将取决于其性能表现。
顺便提一句，关于MAI-1更多的信息，可能会在5月21日-23日微软Build开发者大会上首次展示。
接下来，就是坐等MAI-1发布了。
Postman是一套面向API全生命周期的开发与测试平台，可在Mac上发送和调试多种协议请求，管理集合、环境及认证信息，并完成脚本测试、模拟服务、监控、文档发布和团队协作。它适合开发、测试及运维人员使用，提供个人免费方案。
Docker Desktop 是 Docker 官方为 Mac 提供的容器开发环境，集成 Docker Engine、命令行工具、Compose、Build、Kubernetes 与图形化管理界面。
Android Studio 是 Google 面向安卓应用开发提供的官方集成开发环境，基于 IntelliJ IDEA 构建。它整合智能代码编辑、Gradle 构建、界面预览、设备模拟、性能分析、调试测试及 APK 分析等工具。
Xcode 是苹果面向 Mac 提供的官方集成开发环境，将代码编辑、项目构建、SwiftUI 实时预览、设备模拟、自动化测试、断点调试、性能分析和应用分发整合在同一套工作流中，适合开发与维护 iPhone、iPad、Mac、Apple Wa
JetBrains WebStorm 是面向 JavaScript、TypeScript 和现代 Web 技术的专业集成开发环境，可智能理解项目结构，提供代码补全、重构、错误检查、运行调试、测试及 Git 工具。
PhpStorm 是 JetBrains 推出的专业 PHP 集成开发环境，可在 Mac 上完成代码编写、智能检查、重构、调试、测试和数据库管理。它支持主流 PHP 框架、Composer、Git、Docker 与远程解释器。
JetBrains PyCharm 是面向 Python 开发者的集成开发环境，提供智能补全、代码检查、重构、调试、测试、版本控制及虚拟环境管理功能。Mac 版兼容 Intel 与 Apple 芯片，核心功能可免费使用。
IntelliJ IDEA 是 JetBrains 推出的专业集成开发环境，重点服务于 Java、Kotlin 与 JVM 项目开发。软件集成代码补全、静态检查、重构、调试、测试、版本控制及构建工具，并可借助插件扩展语言和框架支持。
Visual Studio Code 是微软提供的免费代码编辑器，支持 macOS，并为 Intel 与 Apple 芯片 Mac 提供适配版本。软件集代码编辑、调试、Git 源代码管理、集成终端和扩展市场于一体。
REAPER是Cockos开发的数字音频工作站，提供多轨音频与MIDI录制、剪辑、处理、混音和母带制作工具。Mac版兼容Intel与Apple芯片，支持AU、VST、VST3、CLAP等插件格式，并提供高度可定制的工作流程。
Adobe Audition 是面向播客、影视后期、音乐制作及内容创作者的专业音频工作站，提供波形精修、多轨录制与混音、频谱编辑、降噪修复、响度匹配和效果处理工具，并可与 Adobe Premiere 协同完成视频声音制作。
Pro Tools 是 Avid 推出的专业数字音频工作站，覆盖多轨录音、无损剪辑、MIDI 编曲、插件处理、自动化混音及声音与画面同步等工作。它拥有 Intro、Artist、Studio 和 Ultimate 等方案。
PixPix 是面向品牌、卖家和内容团队的在线 AI 图片视频创作平台，提供图视频 Agent、无限画布、图片生成、视频生成、自然语言编辑及商品套图、产品精修和带货视频等电商工具。
Postman 是面向 API 全生命周期的开发与协作平台。Windows 桌面版可用于构建和发送 HTTP、GraphQL、gRPC、WebSocket、MQTT 等请求，并提供环境变量、集合、脚本测试、模拟服务、监控、文档及团队工作区等
Docker Desktop 为 Windows 开发者提供集成式容器环境，内置 Docker Engine、命令行工具、Compose、Build 与 Kubernetes 等组件，可在本机完成镜像构建、容器运行、日志查看和资源管理。
Android Studio 是 Google 面向 Android 应用开发提供的官方集成开发环境，以 IntelliJ IDEA 为基础，集成智能代码编辑、Gradle 构建、设备模拟、界面预览、调试测试及性能分析工具，
WebStorm 是 JetBrains 面向 JavaScript、TypeScript 和现代 Web 技术打造的集成开发环境。它提供项目级代码分析、智能补全、安全重构、导航搜索，并集成调试、测试、终端、Git 与常用前端工具，
PhpStorm 是 JetBrains 面向 PHP 与现代 Web 开发打造的专业集成开发环境，提供代码补全、静态检查、重构、调试、测试、数据库、版本控制及前端语言支持。Windows 用户可直接下载安装程序，
PyCharm 是 JetBrains 推出的 Python 集成开发环境，提供智能代码补全、错误检查、重构、调试、测试、Git、终端及 Jupyter Notebook 支持。统一版安装后可体验 30 天 Pro 功能，
JetBrains IntelliJ IDEA 是以 Java、Kotlin 和 JVM 项目为核心的专业集成开发环境，提供智能补全、代码检查、安全重构、调试、测试、版本控制及构建工具集成。统一发行版的核心功能可免费用于商业和非商业项目，
Visual Studio Code 是微软推出的免费代码编辑器，Windows 版集成智能补全、代码导航、调试、终端和版本控制，并可通过扩展添加语言、格式化及远程开发能力。它启动较快、配置灵活，
REAPER 是 Cockos 推出的数字音频工作站，适用于录音、MIDI 编曲、音频编辑、混音、母带制作及声音设计。软件安装包小巧，支持多轨录制、灵活路由、自动化、第三方插件和脚本扩展，并提供完整功能的 60 天免费评估期。
Adobe Audition 是面向播客、影视后期、广播与音乐制作的专业音频工作站，提供波形编辑、多轨混音、频谱分析、录音、降噪修复和效果处理等功能。Windows 版通过 Adobe Creative Cloud 安装和管理，
Pro Tools 是 Avid 推出的专业数字音频工作站，提供多轨录音、音频剪辑、MIDI编曲、插件处理、自动化混音及影视声音制作能力。它适合音乐人、录音师、制作人和音频后期团队使用，并提供免费入门版、订阅方案及永久授权选择。