news 2026/6/18 1:43:21

SGLang AI 金融 π 对(杭州站)火热来袭!

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
SGLang AI 金融 π 对(杭州站)火热来袭!

本次 SGLang Meetup 聚焦于提升大模型推理效率的核心工程挑战。活动将介绍 SGLang 创新的缓存系统,通过分层与混合架构管理来优化内存使用;分享能实现模型权重秒级更新与快速加载的中间件,以加速强化学习等场景的迭代。同时,社区也展示了在支持 GLM、Mamba 等多样化模型,以及SGLang在昇腾的大模型推理优秀实践。 SGLang 社区致力于通过开源协作,为复杂 AI 模型构建高效灵活推理引擎,欢迎广大开发者线下参会。

🕑 时间:12月20日(周六)14:00

📌 地点:杭州紫金港美居酒店 三楼 祥符厅

为什么一定要来?

这不是一场泛泛而谈的行业聚会,而是一场围绕 Agent、强化学习(RL)与推理系统工程的深度技术探索。

▶ 下一代推理系统的“重构现场”

面对 DeepSeek-V3 等新一代模型,传统的内存管理已捉襟见肘。本次将首度揭秘 SGLang 两大创新:HiCache 与 Hybrid Cache。从硬件到分布式存储的三级缓存体系,到支持 SparseAttention 的分层内存管理,带你从底层看透性能上限是如何被突破的。

▶ 直击 RL 训练中的“工程命门”

在强化学习与大规模推理中,权重的频繁更新是效率杀手。我们将深入探讨 Checkpoint Engine —— 专为 LLM 设计的轻量级权重更新中间件。秒级“原地”更新、Zero-Copy 技术、P2P 传输模式,这些来自一线实战的工程细节,将直接解答如何大幅缩短 RL 训练中的推理等待时间。

▶ 完整的“软硬协同+垂直落地”生态

  • 看落地:华为工程师现身说法,拆解金融领域 Agentic RL 的确定性计算与多轮对轮优化;

  • 看适配:SGLang 在昇腾异构环境下的真实优化路径,及对 Qwen/DeepSeek 的深度支持;

▶ SGLang与GLM模型的生态建设

随着模型尺寸的增加和MoE的模型,模型推理的重要性日益显现,GLM布道师将介绍 SGLang 与 GLM 模型的生态建设,重点介绍在 SGLang 上高效部署 GLM,包括基础的部署,PD分离,以及讲解在GLM模型适配中的一些合作历程,包括SGLang框架的适配 以及 联合研发的 Slime开源框架。

社区周边 × 限量好礼 × 抽奖福利

  • 定制款周边伴手礼

  • 现场抽奖:罗技 G316 X / 电竞版 8K 机械键盘、程序员定制礼盒、超级解压捏捏乐

  • 参与小红书互动即可拿限定礼品

议程一览

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/16 17:29:12

如何快速精通 Hello World 的 20 种写法 ?

在当今的数字世界中,编程是一项非常抢手的技能。无论你是想要开始一份新的职业,或者只是想扩展你现有的技能,学习编程是开拓新机遇的绝佳途径。作为一个初学者,编写“Hello World”程序就像一个入门仪式,让我们对基本语…

作者头像 李华
网站建设 2026/6/17 18:54:11

【JavaWeb】路径问题_响应重定向和请求转发的路径问题

目录响应重定向相对路径写法绝对路径写法请求转发相对路径写法绝对路径写法响应重定向 相对路径写法 和前端的相对路径规则基本一致 修改ServletA 此时就找不到了 是因为当前资源的所在路径是http://localhost:8080/demo7/x/y/z/ 修改成如下代码即可 绝对路径写法 和前端…

作者头像 李华
网站建设 2026/6/16 20:47:30

EmotiVoice语音合成系统灰度文化与团队协作机制建立

EmotiVoice语音合成系统:从技术实现到协作生态的演进 在智能语音助手、虚拟偶像和有声内容爆发式增长的今天,用户早已不再满足于“能说话”的机器语音。真正打动人心的,是那些听起来像老朋友般熟悉、还能随剧情起伏而悲喜交加的声音。这正是E…

作者头像 李华
网站建设 2026/6/18 9:35:11

EmotiVoice语音合成离线运行能力:无网络环境下正常使用

EmotiVoice语音合成离线运行能力:无网络环境下正常使用 在智能设备日益普及的今天,语音交互已不再是云端专属的功能。越来越多的场景要求系统即使在完全断网的情况下,依然能够“开口说话”——而且说得自然、有情感、像真人。这正是EmotiVoic…

作者头像 李华
网站建设 2026/6/17 16:18:57

EmotiVoice语音合成系统灰度发布AB测试设计模板

EmotiVoice语音合成系统灰度发布AB测试设计 在虚拟助手越来越“懂你”的今天,我们是否还记得那些机械朗读、毫无起伏的语音播报?那时的TTS(文本转语音)系统像是一个冷漠的复读机,不管你是开心还是悲伤,它都…

作者头像 李华
网站建设 2026/6/18 11:12:06

EmotiVoice能否生成恐怖故事语音?惊悚氛围营造实测

EmotiVoice能否生成恐怖故事语音?惊悚氛围营造实测 在深夜独自听有声书时,你是否曾因一段低语而脊背发凉?那种仿佛有人贴着耳边呢喃的压迫感,正是恐怖叙事最致命的魅力。但如今,这声音未必来自真人——越来越多的惊悚内…

作者头像 李华