新榜讯 昆仑万维今日宣布开源稀疏大模型Skywork-MoE,估计价值高达2千亿美元。据悉,这一先进模型是在之前昆仑万维开源的Skywork-13B模型基础上进行扩展的,标志着MoE Upcycling技术首次得到完整应用并成功实施的开源项目。Skywork-MoE不仅成为了首个能够通过单台4090服务器进行高效推理的开源千亿MoE大模型,其强大的性能更将推理成本降至最低。
扫描二维码
手机浏览
昆仑万维开源2千亿稀疏大模型天工MoE
分享文章链接
相似推荐
昆仑万维天工大模型4.0 O1版将于11月27日启动邀测
新榜讯 11 月 18 日,昆仑万维宣称,天工大模型 4.0 O1 版(英文名:Skywork O1)将于 11 月 27 日开启邀测。
昆仑万维:天工开放平台面向OpenAl用户推出“一键搬家计划”
新榜讯 6月25日,昆仑万维旗下天工开放平台宣布,面向OpenAl API用户推出“一键搬家计划”,并提供1.5亿Tokens的API调用资源(包括天工2.0及天工3.0大模型)。
昆仑万维:旗下Opera与谷歌云深度合作,Aira接入Gemini大模型
新榜讯 昆仑万维旗下海外信息分发与元宇宙平台Opera今日宣布与谷歌云展开深度合作,双方将共同整合谷歌先进的Gemini大模型到Opera的原生浏览器AI助手Aria中。