Toybrick

yolov3推理时间超长

jefferyzhang

版主

积分
13001
楼主
发表于 2019-12-18 08:30:13 | 显示全部楼层
量化了么,推理时间多久?
首次加载模型当然很慢,推理是推理,加载是加载
回复

使用道具 举报

jefferyzhang

版主

积分
13001
沙发
发表于 2019-12-18 11:44:47 | 显示全部楼层
小宁哥 发表于 2019-12-18 11:17
做了量化,推理时间(rknn.inference函数)374.85秒,你说的加载模型是rknn.load_rknn吗 ...

除了推理inference,都是初始化
回复

使用道具 举报

jefferyzhang

版主

积分
13001
板凳
发表于 2019-12-18 14:52:26 | 显示全部楼层
小宁哥 发表于 2019-12-18 12:44
我是使用toolkit工具在pc上跑的,在rk3399上就270ms了,是因为这个工具只适用于这些板子吗 ...

.....
PC那只是仿真
回复

使用道具 举报

jefferyzhang

版主

积分
13001
地板
发表于 2019-12-18 21:28:33 | 显示全部楼层
小宁哥 发表于 2019-12-18 16:01
pc是模拟的rk1808吧,那速度也未免太慢了吧

pc模拟你要看输出的时间和帧率,而不是自己去算他运行时间。
仿真运行而已。 1808和3399pro用的npu是同一个。
莫非你意思是用我们toolkit,你电脑就能得到我们NPU的推理速度了?
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

产品中心 购买渠道 开源社区 Wiki教程 资料下载 关于Toybrick


快速回复 返回顶部 返回列表