Toybrick

标题: rk3588 python硬件解码怎么做？ [打印本页]

作者: zyan 时间: 2023-9-18 09:41
标题: rk3588 python硬件解码怎么做？
有相关api的文档么？

作者: 1281854907@qq.c 时间: 2023-9-18 10:37
python不懂c++是可以的

作者: zyan 时间: 2023-9-18 12:02

1281854907@qq.c 发表于 2023-9-18 10:37
python不懂c++是可以的

老师好，c++也可以，但是我不懂视频编解码，mpi_dec_test有点看不明白，我的输入是mp4文件，mpi_dec_test的输入是h264，这两个怎么转换？解码完h264得到的frame怎么用？有具体例子或教程吗。

作者: jefferyzhang 时间: 2023-9-18 15:27

zyan 发表于 2023-9-18 12:02
老师好，c++也可以，但是我不懂视频编解码，mpi_dec_test有点看不明白，我的输入是mp4文件，mpi_dec_test ...

这种情况我建议你用android系统，写java会好一点。
c/c++比较底层，如果不具备这种知识android提供的api会更上层更好理解，网上demo也更多一点

作者: zyan 时间: 2023-9-20 15:25

jefferyzhang 发表于 2023-9-18 15:27
这种情况我建议你用android系统，写java会好一点。
c/c++比较底层，如果不具备这种知识android提供的api ...

感谢回复，这两天学习了一下，用gst+mpp插件的方法实现了python硬件解码。发现YUV转bgr这一步cpu消耗比较高，这一步转换有硬件的方法吗？

gstreamer_pipeline = (

        f'filesrc location={video_path} ! qtdemux ! queue ! h264parse ! mppvideodec ! videoconvert ! video/x-raw,format=BGR ! appsink'

)
复制代码

作者: jefferyzhang 时间: 2023-9-20 17:12
本帖最后由 jefferyzhang 于 2024-2-18 09:04 编辑

zyan 发表于 2023-9-20 15:25
感谢回复，这两天学习了一下，用gst+mpp插件的方法实现了python硬件解码。发现YUV转bgr这一步cpu消耗比较 ...

格式转换可以用RGA，编解码可以用VPU，其他图像算法可以用GPU。
很多硬件可以做，但第三方库都是CPU做的，你要慢慢改，改到0拷贝完全没有cpu参与，cpu只负责调度，就可以发挥最高性能

作者: 星火 时间: 2023-9-28 11:04

jefferyzhang 发表于 2023-9-18 15:27
这种情况我建议你用android系统，写java会好一点。
c/c++比较底层，如果不具备这种知识android提供的api ...

老师，项目场景需要创建销毁多路不同的分辨率、码率、帧率的编码器。Android系统中每次创建5个编码器，手动调用mediacodec.stop()和mediacodec.release()进行释放。测试了十次后，发现不能继续创建编码器了，想问一下什么原因。按说每次都调用释放的

作者: jefferyzhang 时间: 2023-9-28 11:15

星火发表于 2023-9-28 11:04
老师，项目场景需要创建销毁多路不同的分辨率、码率、帧率的编码器。Android系统中每次创建5个编码器，手 ...

不太可能，请检查自己代码，如果你自己有安卓手机的话，也可以拿出来跑下试试，或者模拟器上先试试

作者: waing 时间: 2024-1-29 14:49

zyan 发表于 2023-9-20 15:25
感谢回复，这两天学习了一下，用gst+mpp插件的方法实现了python硬件解码。发现YUV转bgr这一步cpu消耗比较 ...

你好，请教一下你编译的opencv版本和gstreamer版本是多少，opencv4.8.1和gstreamer1.20.3，一直不行。

作者: 18113121251 时间: 2024-1-29 16:18

zyan 发表于 2023-9-20 15:25
感谢回复，这两天学习了一下，用gst+mpp插件的方法实现了python硬件解码。发现YUV转bgr这一步cpu消耗比较 ...

楼主能分享一下代码吗？我也想看下用python试下gst+mpp是怎么用的 ,感谢我的邮箱 xum@innorev.com.cn

作者: zwdtc 时间: 2024-2-17 20:06

jefferyzhang 发表于 2023-9-20 17:12
格式转换可以用RGA，编解码可以用NPU，其他图像算法可以用GPU。
很多硬件可以做，但第三方库都是CPU做的 ...

请问编码用NPU要怎么搞啊？

作者: jefferyzhang 时间: 2024-2-18 09:04

zwdtc 发表于 2024-2-17 20:06
请问编码用NPU要怎么搞啊？

写错了，是VPU，NPU是用来做模型推理的

欢迎光临 Toybrick (https://t.rock-chips.com/)