Toybrick

RKNN对文本转语音任务支持怎么样,比如tacotron2

xsky

中级会员

积分
388
楼主
发表于 2020-2-18 16:43:42    查看: 7006|回复: 4 | [复制链接]    打印 | 显示全部楼层


RKNN 从文档来看,接口基本都是为图片设计的,请问对于TTS任务要怎么做?
1. 比如输入是不定长的,怎么处理。
2.支持LSTM吗?  NPU为1*x的卷积操作是不是支持的效率不是很高,3399pro单测FC一层的模型,仅看硬件执行时间,参数量少于512K时,fp16效率不如Cortex A72单核fp32。
3.如果编写自定义运算符来支持LSTM,自定义运算符文档叙述说不支持量化,如果模型本身已经是量化的,在自定义运算符处输入的是不是也是量化的数据?  
4.使用VX Kernel编写自定义运算符,是会编译为NPU加速的代码么? 其中的数据类型int8/int16/int32/fp16,NPU都能支持么。

想用rk1808加速棒来做产品,希望帮忙解答,谢谢!
回复

使用道具 举报

xsky

中级会员

积分
388
沙发
 楼主| 发表于 2020-2-19 19:15:50 | 显示全部楼层
嗯,谢谢
回复

使用道具 举报

xsky

中级会员

积分
388
板凳
 楼主| 发表于 2020-2-19 19:16:11 | 显示全部楼层
jefferyzhang 发表于 2020-2-19 10:17
1. 不定长不支持,你可以通过补0来自己做一些处理
2. LSTM没转换过,你可以试试。 NPU对3x3卷积优化比较明 ...


嗯,谢谢
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

产品中心 购买渠道 开源社区 Wiki教程 资料下载 关于Toybrick


快速回复 返回顶部 返回列表