Hacker News· legothief·· 2 小时前AI 评分40
自研流式引擎是不是个坏主意?一家实时数据平台用 LLM 写出 Rust 与 Go 双实现
Is writing your own streaming engine a bad idea?
AI 导读
一家每秒处理超 100 万条消息的实时数据平台借助 LLM 自研流式引擎,3 天上线 staging、2 周进入生产,CPU 效率提升 5 倍、内存降低近 10 倍。团队用 Rust 和 Go 写了两套实现并做并行一致性测试,称其性能大幅超过 QuestDB 和 kdb+ 等开源方案,还通过内置函数把特定指标计算加速 100 倍。作者认为与其 fork 开源项目,不如按自身用例重写,但暂未开源。
来源:Hacker News · almostintuitive.com