登录社区云,与社区用户共同成长
邀请您加入社区
本次直播将介绍一种面向MoE模型的多层级协同剪枝方法:先压缩输入空间,减少无效计算;再结合专家剪枝与专家核心集选择,保留最具代表性的专家子集,在尽量维持模型效果的同时降低推理开销,并探讨其在AMCT-Pruning中的实现思路与应用价值。
1331
更多推荐
CANN 开发者 Meetup 南京站|轻量开发专场,线下技术沙龙正式开启报名
代码侦探挑战赛(第二期)开启丨补全算子代码赢定制背包、冲锋衣等奖品!
代码侦探挑战赛(第三期)开启丨补全算子代码赢定制背包、冲锋衣等奖品!
扫一扫分享内容
为遵守国家网络实名制规定,未绑定将限制内容发布与互动
所有评论(0)