多路高清YUV视频GPU实时拼接研究

doi:10.3969/j.issn.1000-3428.2016.12.053

计算机工程

• 开发研究与工程应用 • 上一篇

多路高清YUV视频GPU实时拼接研究

王震^1,2,许晓航 ^1,2,王静 ^1,2,李圣 ^1,2,郑宏 ^1,2

(1.武汉大学电子信息学院,武汉 430072; 2.湖北省视觉感知与智能交通技术研发中心,武汉 430072)

收稿日期:2015-11-03 出版日期:2016-12-15 发布日期:2016-12-15
作者简介:王震（1990—），男，硕士研究生，主研方向为计算机视觉；许晓航，博士；王静、李圣，硕士；郑宏，教授。
基金资助:
国家“973”计划项目（2012CB719905）。

Research on GPU Real-time Stitching of Multi-channel High-definition YUV Video

WANG Zhen ^1,2,XU Xiaohang ^1,2,WANG Jing ^1,2,LI Sheng ^1,2,ZHENG Hong ^1,2

(1.School of Electronic Information,Wuhan University,Wuhan 430072,China;2.Hubei Research and Development Center of Vision Perception and Intelligent Transportation Technology,Wuhan 430072,China)

Received:2015-11-03 Online:2016-12-15 Published:2016-12-15

摘要/Abstract

摘要： 为提高高清视频拼接的实时性能,提出一种基于GPU的多路高清YUV视频实时拼接方法,推导出YUV422图像拼接中的透视模型,并结合计算统一设备架构技术,实现透视变换、无缝融合等关键拼接步骤在GPU上的并行优化。在4路1080p高清视频上的实验结果表明,相比基于RGB颜色模型的拼接方法,该方法的实时拼接性能在不同GPU架构上有20%~40%的提升,并且在GRX780上能达到33 frame/s的视频帧率。

关键词: 视频拼接, YUV颜色模型, 透视模型, 图形处理器, 计算统一设备架构

Abstract: To improve the real-time performance of high-definition video stitching,a stitching method of GPU-based real-time multi-channel high-definition YUV video is proposed.Firstly,the perspective model of YUV422 image stitching is deduced,and then parallel optimization of the stitching steps including perspective warping and image blending are realized and performed on GPU by Compute Unified Device Architecture(CUDA) technology.The experimental results show that,on the condition of implementing four-channel 1080p video stitching,the method in this paper achieves 20%~40% improvement in real-time performance over RGB color model-based stitching method on different GPU,and video frame rate of 33 frame per second on GTX 780.

Key words: video stitching, YUV color model, perspective model, Graphics Processing Unit(GPU), Compute Unified Device Architecture(CUDA)

中图分类号:

TP37

王震,许晓航,王静,李圣,郑宏. 多路高清YUV视频GPU实时拼接研究[J]. 计算机工程, doi: 10.3969/j.issn.1000-3428.2016.12.053.

WANG Zhen,XU Xiaohang,WANG Jing,LI Sheng,ZHENG Hong. Research on GPU Real-time Stitching of Multi-channel High-definition YUV Video[J]. Computer Engineering, doi: 10.3969/j.issn.1000-3428.2016.12.053.

https://www.ecice06.com/CN/Y2016/V42/I12/314

参考文献

参考文献［1］Stensland H K,Gaddam V R,Tennoe M,et al.Bagadus:An Integrated Real-time System for Soccer Analy-tics［J］.ACM Transactions on Multimedia Computing,Communications,and Applications,2014,10(1s):7. ［2］Kellerer L,Gaddam V R,Langseth R,et al.Real-time HDR Panorama Video［C］//Proceedings of ACM International Conference on Multimedia.New York,USA:ACM Press,2014:1205-1208. ［3］Liao W S,Hsieh T J,Chang Y L.GPU Parallel Computing of Spherical Panorama Video Stitching［C］//Proceedings of the 18th International Conference on Parallel and Distributed Systems.Washington D.C.,USA:IEEE Press,2012:890-895. ［4］Meng X,Wang W,Leong B.SkyStitch:A Cooperative Multi-UAV-based Real-time Video Surveillance System with Stitching［C］//Proceedings of the 23rd Annual ACM Conference on Multimedia Conference.New York,USA:ACM Press,2015:261-270. ［5］吴健,兰时勇,黄飞虎.一种多路快速视频拼接系统设计与实现［J］.计算机工程,2014,40(2):208-211,218. ［6］Brown M,Lowe D G.Automatic Panoramic Image Stitching Using Invariant Features［J］.International Journal of Computer Vision,2007,74(1):59-73. ［7］Wilt N.The Cuda Handbook:A Comprehensive Guide to GPU Programming［M］.［S.l.］:Pearson Education,2013. ［8］Kwatra V,Schdl A,Essa I,et al.Graphcut Textures:Image and Video Synthesis Using Graph Cuts［J］.ACM Transactions on Graphics,2003,22(3):277-286. ［9］Szeliski R.Image Alignment and Stitching:A Tutorial［J］.Foundations and Trends in Computer Graphics and Vision,2005,2(11/12):273-292. ［10］Hartley R,Zisserman A.Multiple View Geometry in Computer Vision［M］.Cambridge,UK:University of Cambridge Press,2003. ［11］Xiong Y,Pulli K.Color Correction for Mobile Panorama Imaging［C］//Proceedings of the 1st International Conference on Internet Multimedia Computing and Service.New York,USA:ACM Press,2009:219-226. ［12］宋宝森.全景图像拼接方法研究与实现［D］.哈尔滨:哈尔滨工程大学,2012. ［13］王小强,陈临强,梁旭.实时全自动视频拼接方法［J］.计算机工程,2011,37(5):291-292. ［14］Shih F Y,Wu Y T.Fast Euclidean Distance Transformation in Two Scans Using a 3×3 Neighborhood［J］.Computer Vision and Image Understanding,2004,93(2):195-205. ［15］Burt P J,Adelson E H.A Multiresolution Spline with Application to Image Mosaics［J］.ACM Transactions on Graphics,1983,2(4):217-236. 编辑陆燕菲

[1]	黄斌, 柳安军, 潘景山, 田敏, 张煜, 朱光慧. 基于GPU的LBM迁移模块算法优化[J]. 计算机工程, 2024, 50(2): 232-238.
[2]	林琳, 祝爱琦, 赵明璨, 张帅, 叶炎昊, 徐骥, 韩林, 赵荣彩, 侯超峰. 晶硅分子动力学模拟的GPU加速算法优化[J]. 计算机工程, 2023, 49(4): 166-173.
[3]	李靖, 祝爱琦, 韩林, 侯超峰. 基于GPU的固态晶体硅分子动力学算法优化[J]. 计算机工程, 2023, 49(3): 288-295.
[4]	肖汉, 郭宝云, 李彩林, 周清雷. 面向异构架构的传递闭包并行算法[J]. 计算机工程, 2021, 47(8): 131-139.
[5]	杨世伟, 蒋国平, 宋玉蓉, 涂潇. 基于GPU的稀疏矩阵存储格式优化研究[J]. 计算机工程, 2019, 45(9): 23-31,39.
[6]	方玉玲, 陈庆奎. 基于矩阵转换的卷积计算优化方法[J]. 计算机工程, 2019, 45(7): 217-221,228.
[7]	汤佳,龚奕利,李文海. 一种基于GPU的KNN动态扩展查询策略[J]. 计算机工程, 2018, 44(6): 1-7.
[8]	魏渐俊,陈良育. 基于GPGPU的大整数矩阵行列式快速准确计算方法[J]. 计算机工程, 2018, 44(3): 47-54.
[9]	高艺,罗健欣,裘杭萍,吴波. 基于GPU栅格化的任意多边形布尔运算[J]. 计算机工程, 2018, 44(3): 301-306,314.
[10]	王吉军,程华. 通用图形处理器功耗估算模型[J]. 计算机工程, 2017, 43(2): 92-97,104.
[11]	马冬冬,衷璐洁,朱敬茹. 基于GPU的LLVM程序分析信息并行提取[J]. 计算机工程, 2017, 43(10): 23-30.
[12]	陈勇,吴晓民,杨坚,奚宏生. 基于CUDA的H.264并行解码器设计与实现[J]. 计算机工程, 2016, 42(5): 249-252,257.
[13]	田盼,华蓓,陆李. 基于GPU 的K-近邻算法实现[J]. 计算机工程, 2015, 41(2): 189-192,198.
[14]	杜晓刚,党建武,王阳萍. 基于CUDA的改进互信息并行计算方法[J]. 计算机工程, 2015, 41(12): 288-292,298.
[15]	吴健，兰时勇，黄飞虎. 一种多路快速视频拼接系统设计与实现[J]. 计算机工程, 2014, 40(2): 208-211,218.

选择文件类型/文献管理软件名称

选择包含的内容

多路高清YUV视频GPU实时拼接研究

Research on GPU Real-time Stitching of Multi-channel High-definition YUV Video

PDF

可视化

被引次数

摘要/Abstract

引用本文

使用本文

参考文献

相关文章 15

编辑推荐

Metrics

本文评价

模态框（Modal）标题

选择文件类型/文献管理软件名称

选择包含的内容

多路高清YUV视频GPU实时拼接研究

Research on GPU Real-time Stitching of Multi-channel High-definition YUV Video

PDF

可视化

被引次数

摘要/Abstract

引用本文

使用本文

参考文献

相关文章 15

编辑推荐

Metrics

本文评价