GLM-5自包含推理引擎原型发布
热点事件持续更新
GLM-5自包含推理引擎原型发布
1 篇报道1 个报道来源51 分钟前更新
先了解这件事
AI 综述
开发者 adityazero 发布了一个从零构建的 GLM-MoE-DSA 实验性推理引擎原型,其服务路径不依赖 vLLM、SGLang、Transformers 或 PyTorch,仅使用编译为 PTX 的 Vx 数值内核。 目前可用的是经过测试的 CPU 原型,另有一条明确的 NVIDIA GPU 内核/后端路径;该 GPU 路径可编译为 PTX,但实际 GPU 执行与最优性能尚未验证。 该服务默认绑定回环地址,且没有身份验证和 TLS,作者建议在对外暴露前先加装网关。
AI 根据报道生成 · 45 分钟前更新
最新进展10月21日 01:09
自包含 GLM-5 推理栈:仅用编译为 PTX 的 Vx 内核报道时间线
沿着报道,了解事件的不同侧面。
10月21日
- Hacker News自包含 GLM-5 推理栈:仅用编译为 PTX 的 Vx 内核
一个从零构建的 GLM-MoE-DSA 实验性推理引擎仅用编译为 PTX 的 Vx 数值内核,服务路径不依赖 vLLM、SGLang、Transformers 或 PyTorch。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。