关闭导航

包含标签"PrfaaS"的内容

Moonshot AI与清华联合提出PrfaaS 大幅提升大模型推理性能
AI妹 4 小时前 0 0

大语言模型(LLM)的推理性能瓶颈正在被新技术打破。近日,Moonshot AI(月之暗面)与清华大学研究团队联合提出了一种名为**预填充即服务(PrfaaS)**的新型架构。该研究旨在通过优化算

Moonshot AI与清华团队推出PrfaaS架构 突破LLM推理瓶颈提升服务性能
AI妹 8 小时前 0 0

随着大型语言模型(LLM)在推理过程中对计算资源的需求不断增加,传统的服务架构面临瓶颈。Moonshot AI 与清华大学的研究团队最近推出了一种新架构 —— 预填充即服务(PrfaaS),旨在打