找回密码
 立即注册
搜索
热搜: 星闪 最新 活动
查看: 248|回复: 0

DaVinci架构量化效率问题

[复制链接]

9

主题

0

回帖

73

积分

注册会员

积分
73
发表于 2025-3-26 08:38:33 | 显示全部楼层 |阅读模式
例如SS928 NNN核,经常出现量化后,推理效率不高问题。
1、AI Core 采用了达芬奇架构,它包括了三种基础计算资源:矩阵计算单元(Cube Unit)、向量计算单元(Vector Unit)和标量计算单元(Scalar Unit)。
2、量化只对Cube Unit起作用。
3、由于量化算法的限制,conv的通道数不能太小,例如12/8/4....。
4、采用auto_tune_mode在线调优。
5、还是没有性能提升,profiling查看各个timeline,具体分析。
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|【淇诺科技】技术论坛 ( 粤ICP备14010465号-1|粤ICP备14010465号-1 )

GMT+8, 2026-4-2 19:18 , Processed in 0.131576 second(s), 19 queries .

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表