展开菜单
首页 精品内容 本月促销 装机必备 Windows PDF教程 macOS软件 IOS软件 Android AI 专题
全部分类

当前位置:

首页 > 硬件相关 > SGLang×MUSA Meetup圆满落幕,国产GPU开源生态进入“原生支持”

SGLang×MUSA Meetup圆满落幕,国产GPU开源生态进入“原生支持”

5月10日,SGLang与摩尔线程联合举办MUSA开源技术沙龙,宣布MUSA后端正式合入SGLang主线,国产GPU实现原生支持,开发者可直接调用摩尔线程全功能GPU运行推理任务。技术分享聚焦框架优化、算子编译与生态共建,推动国产算力与主流开源框架深度融合。

本文目录

    5月10日,这场技术沙龙的风,终究还是吹到了北京。由摩尔线程与SGLang社区联合主办的“MUSA开源技术沙龙|SGLang × MUSA Meetup”,在这一天正式拉开帷幕。



    现场的氛围,比预想中热烈得多。不只是SGLang的核心开发成员悉数到场,TileLang、Triton、Mooncake等开源社区的技术大牛也纷纷现身。近百位前沿开发者挤满了会场,围绕着大模型推理引擎、算子编译、工程优化与生态共建这些硬核话题,进行了一场真正高密度、深层次的碰撞。



    这不仅是MUSA后端正式合入SGLang主线后的首次线下聚会,更像是一次里程碑式的成果发布。基于最新的支持体系,开发者在使用SGLang跑大语言模型或多模态推理任务时,可以直接调用摩尔线程的全功能GPU,不需要再依赖任何第三方适配层。国产算力与国际主流推理框架之间的协同,从此进入了“原生支持”的新阶段。

    立足通用计算,以MUSA开放架构拥抱开源生态

    摩尔线程CTO张钰勃的开场致辞,信息量很大。他详细拆解了MUSA(Meta-computing Unified System Architecture)统一系统架构的核心设计理念。他反复强调,摩尔线程从一开始就坚持“通用计算”的初衷,底层计算平台必须真正通用且高度统一,才能支撑从物理世界仿真、数字孪生到具身智能的未来演进,不为创新设限。同时,通过全产品线统一的指令集与架构标准,确保软件生态能够持续积累。



    面对开发者最关心的生态迁移问题,张钰勃的表态也很直接:“MUSA在接口设计上最大程度复用了开发者熟悉的GPU编程习惯。我们不想创造一套封闭的生态,而是以零学习成本,全面融入现有的繁荣生态。”这种开放的姿态,直接解释了为什么MUSA能获得SGLang的最新支持。未来,摩尔线程还会继续在框架底层创新上贡献力量。

    技术分享:从推理框架到算子内核,共探国产GPU落地路径

    技术分享环节,信息密度极高。SGLang、Triton、TileLang及Mooncake社区的核心专家,围绕推理框架、算子编译与训推系统等议题,带来了五场深度技术分享。



    解析演进路线,SGLang以创新架构挑战大模型推理极限

    SGLang核心开发成员Xiaoyu Zhang(BBuf)重点解析了框架的关键演进:支撑DeepSeek-V4等模型的Prefill-Decode分离架构与分层缓存机制,以及Zero-overhead Speculative Decoding带来的推测解码效率跃升。在算子层,原有的sgl-kernel包因为体积膨胀(超1.5GB)已经逐步迁移到全新的Jit-kernel体系,基于TVM-FFI实现按需编译,大幅提升了开发与发版效率。同时,SGLang积极引入Vibe Coding实践,利用AI Agent自动完成了超60项性能分析与调优任务。发布2026年Q2 Roadmap时,他明确表示摩尔线程MUSA已正式纳入SGLang硬件适配核心阵列,未来双方将深化原生算子支持,推动顶级推理框架与国产算力底座的“原生”级融合。



    打通原生生态,MUSA释放主流模型“开箱即用”算力

    摩尔线程Contributor ROCKSTAR分享了SGLang在MUSA平台上的优化与工程落地实践。他重点介绍了实现快速兼容的关键——torchada适配层。通过一次import torchada,开发者现有CUDA代码就能无缝运行在摩尔线程GPU上,大幅降低了适配与维护成本。在算子层面,摩尔线程开源的MATE(MUSA AI Tensor Engine)算子库提供了高性能Attention与GEMM算子,已经对接了FlashAttention、FlashMLA、DeepGEMM等主流接口。目前,基于MUSA的SGLang已经支持DeepSeek、Qwen、GLM等主流大模型及Wan、LTX等视频生成模型,在MTT S5000等硬件上实现了真正的“开箱即用”与无缝加速。截至5月12日,摩尔线程在SGLang主线累计提交47个PR,其中41个已合入,从环境构建到分布式推理的全链路已经打通。



    攻克关键算子优化,Triton助力构建跨芯片统一软件栈

    北京智源人工智能研究院AI编译器研究员肖航的演讲,聚焦于大模型Triton关键算子的优化及其在MUSA平台上的深度适配。他介绍了旨在打通多种AI芯片的统一开源软件栈FlagOS,其FlagGEMs算子库已经涵盖超497个算子,并依托FlagTree编译器与Triton-TLE语言扩展,实现了跨芯片的高性能算子生成。通过融化、量化等方式加速Fused MoE和FP8 GEMM等算子性能4倍以上。在DeepSeek-V4的Day0适配中,通过摩尔线程专用的张量加速引擎与FlagOS调优方案,TTFT时延降低了56.7%,吞吐量提升了65.7%。这种跨芯片的统一抽象与优化机制,正在为摩尔线程等国产GPU构建起更丰富、高效的算力应用生态。



    破解硬件依赖,TileLang以极简抽象重塑算子开发范式

    TileLang Maintainer唐正举深入探讨了TileLang在化解算子硬件依赖与性能调优上的核心优势。作为一个Tile级领域特定编程语言(DSL),通过对计算与数据搬运基本单元(Tile)的显式控制,开发者可以用极简代码实现极致性能——比如用约50行代码写出比肩FlashAttention专家库的kernel,在Attention-Sinks等算子上更获得了20倍以上加速。TileLang提供了Beginner、Developer、Expert三种编程模式,兼顾上手简易与深度调优;DeepSeek-V4已经在训练中原生采用其编写核心kernel,达到了硬件峰值性能。作为开源近一年即斩获超6000星的热门社区,TileLang正在与MUSA生态深度联调,共同构建适配摩尔线程全功能GPU的高性能算子库。



    践行极致解耦,Mooncake训推一体系统在国产GPU的高效实践

    Mooncake Contributor马腾分享了Mooncake与SGLang深度结合的技术演进。其核心传输引擎(Transfer Engine)充分利用零拷贝RDMA与多协议支持,实现了高吞吐与超低延迟;KV Cache Store将GPU显存、DRAM、SSD等异构存储统一池化,显著降低了长上下文推理成本。在弹性EP架构中,Mooncake支持故障节点动态摘除与Expert映射调整,大幅提升了集群容错能力;在RL权重更新场景,通过P2P传输将同步时间从53秒压缩至7.2秒。目前,摩尔线程已经作为Mooncake项目的核心Maintainer之一,深度参与了多节点通信协议等关键特性的共建。

    圆桌讨论:SGLang+MUSA 生态共建与工程化破局

    圆桌对话环节,由摩尔线程软件副总裁杨上山担任主持人,与Xiaoyu Zhang(BBuf)、ROCKSTAR、肖航、唐正举及马腾五位技术专家同台,围绕“SGLang + MUSA生态共建与工程化破局”展开了深度探讨。



    面对开源技术创新提速与国产多硬件生态复杂度加剧的双重挑战,嘉宾们从框架、算子、通信到系统架构逐一破题:BBuf呼吁框架层建立更干净的硬件抽象,避免侵入式修改;R0CKSTAR分享了MUSA在兼容CUDA生态过程中“接口兼容、底层创新”的关键路径;肖航结合Triton及TLE扩展,探讨了可编程性与极致性能之间的再平衡策略;唐正举强调TileLang的Tile抽象可以作为连接模型、算子和硬件的统一纽带,助力国产芯片全链路形成合力;马腾则从系统视角指出,最佳实践的沉淀与端到端场景验证是生态繁荣的关键。嘉宾们一致认为,未来12个月应该优先建立跨层级的统一抽象边界、标准化适配接口与共享的基准测试体系,用开放协作替代重复适配,共同推动国产AI软硬件生态的协同突破。

    结语

    这场“SGLang × MUSA Meetup”的成功举办,标志着MUSA后端合入SGLang主线后,国产GPU与全球顶级推理框架的协同从“代码共建”迈向了“生态共聚”。





    通过与SGLang、TileLang、Triton、Mooncake等开源社区的紧密协作,摩尔线程不仅推动了MUSA平台与主流AI框架的深度适配,更以实际行动赋能开发者,持续助力国产算力与全球开源生态的深度融合。从一行行代码的提交合入,到如今线下社区的深度共聚,这条路走得扎实,也走得远。摩尔线程正在携手顶尖开源力量,夯实国产GPU软件栈底座,与广大开发者一起,加速AI应用的创新与落地。

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    硬件相关
    相关文章 更多
    精品专题 更多
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    macOS软件

    正软商城macOS软件专区,精选适用于Mac电脑的办公、设计、影音、效率、开发和系统工具,提供软件功能介绍、macOS兼容版本、正版授权及购买下载服务。

    IOS软件

    正软商城iOS软件专区,精选适用于iPhone和iPad的办公、学习、影音、设计、效率及AI应用,提供功能介绍、适用设备、系统要求和正版获取方式等信息。

    AI

    正软商城AI软件专区,汇集AI写作、AI绘画、AI视频、AI办公、AI编程、AI翻译、智能客服和数据分析等人工智能工具,提供功能介绍、适用平台、收费方式及正版购买信息。

    Mac软件 更多
    Aperty macOS版
    Aperty macOS版

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    火山引擎 网页版
    火山引擎 网页版

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    立刻MV 网页版
    立刻MV 网页版

    立刻MV 面向音乐人、内容创作者和品牌团队,帮助用户低成本完成歌曲 MV、歌词视频、AI 分镜、图生视频与最终合成。

    蛙蛙写作 网页版
    蛙蛙写作 网页版

    蛙蛙写作 AI 创作工具,覆盖小说、剧本、文案,一键生成文稿,打通文字转视频全流程,高效解决创作难题。

    讯飞智作 网页版
    讯飞智作 网页版

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    超级简历WonderCV 网页版
    超级简历WonderCV 网页版

    超级简历WonderCV是面向应届生和AI小白的智能求职平台,覆盖简历、面试与职业规划。

    音述AI 网页版
    音述AI 网页版

    音述AI,是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区。

    AionClaw macOS版
    AionClaw macOS版

    AionClaw 是可在桌面端运行的任务型 AI 助手,通过数字专家与技能市场组合办公、创作、数据和开发能力。

    Loomy macOS版
    Loomy macOS版

    Loomy 是科大讯飞推出的桌面 AI 助手,可通过对话、任务与工作目录协助处理办公、内容创作和资料整理。

    AirBuddy 3 macOS版
    AirBuddy 3 macOS版

    AirBuddy 3 是面向 macOS 的蓝牙外设增强工具,可集中查看 AirPods、Beats 与苹果设备电量,提供快速连接、播放控制、电量提醒、桌面小组件和多台 Mac 外设接力等功能。

    AirServer macOS版
    AirServer macOS版

    AirServer macOS版可把 Mac 转换为无线投屏接收端,通过 AirPlay 或 Google Cast 接收手机、平板和电脑画面,并支持多设备同时连接、高清镜像及会话录制,适合家庭娱乐、课堂教学、会议演示和应用展示。

    AnyDesk macOS版
    AnyDesk macOS版

    AnyDesk macOS版是一款适用于远程办公、设备维护和客户支持的远程桌面工具,可连接并操作异地计算机,支持文件传输、无人值守访问、会话权限控制及跨平台协作。

    WINDOWS 更多
    Aperty Windows版
    Aperty Windows版

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    火山引擎 网页版
    火山引擎 网页版

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    立刻MV 网页版
    立刻MV 网页版

    立刻MV 面向音乐人、内容创作者和品牌团队,帮助用户低成本完成歌曲 MV、歌词视频、AI 分镜、图生视频与最终合成。

    蛙蛙写作 网页版
    蛙蛙写作 网页版

    蛙蛙写作 AI 创作工具,覆盖小说、剧本、文案,一键生成文稿,打通文字转视频全流程,高效解决创作难题。

    讯飞智作 网页版
    讯飞智作 网页版

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    超级简历WonderCV 网页版
    超级简历WonderCV 网页版

    超级简历WonderCV是面向应届生和AI小白的智能求职平台,覆盖简历、面试与职业规划。

    音述AI 网页版
    音述AI 网页版

    音述AI,是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区。

    AionClaw Windows版
    AionClaw Windows版

    AionClaw 是可在桌面端运行的任务型 AI 助手,通过数字专家与技能市场组合办公、创作、数据和开发能力。

    Loomy Windows版
    Loomy Windows版

    Loomy 是科大讯飞推出的桌面 AI 助手,可通过对话、任务与工作目录协助处理办公、内容创作和资料整理。

    讯飞绘文 网页版
    讯飞绘文 网页版

    讯飞绘文网页版是科大讯飞推出的AI图文创作与内容运营工具,覆盖热点选题、文章生成、稿件校对、智能配图、排版发布和数据复盘等环节,适合自媒体创作者及内容团队在线使用。

    AirServer Windows版
    AirServer Windows版

    AirServer Windows版可把电脑变成AirPlay、Google Cast和Miracast无线投屏接收端,适合会议演示、课堂教学及家庭大屏分享。发送设备通常无需另装客户端,并可同时接收和智能排列多个镜像会话。

    AlwaysUp Windows版
    AlwaysUp Windows版

    AlwaysUp是一款面向Windows的系统服务注册与程序托管工具,可让普通应用、脚本及批处理在无人登录时随系统启动,并通过状态检测、异常重启、资源监控和邮件通知保障关键任务持续运行。