SRTP: Qt与OpenCV视频传输

简介：
本项目旨在探索利用Qt框架结合OpenCV库实现高效的视频传输技术。通过该系统，我们能够优化视频数据处理流程，提升实时性和图像质量，为远程监控、视频会议等领域提供技术支持。 在进行SRTP项目的过程中，我们尝试实现远程控制二级柔性倒立摆的功能，但最终不小心开发成了一个简单的远程视频监控系统。在这里记录一下我们的经验和教训。 我们采用的方案是将OpenCV采集到的图像（Mat对象）转换成Qt中的QImage格式，并使用QImage进行压缩后再传输。为什么不直接传输Mat呢？因为Mat数据未经过任何形式的压缩，而将其保存为文件时可以应用相应的压缩算法，但在这个场景下不需要生成实际文件。因此我们选择利用QImage的save方法将图像存储到一个临时缓冲区（QBuffer），然后发送这个缓冲区的数据。 起初计划使用UDP传输协议进行视频流传输的想法是基于丢弃一两帧不会造成太大影响的原则，然而很快发现一个问题：一个单个的用户数据报文无法容纳完整的图片数据。尽管通过调用QImage的save方法时可以压缩图像大小，但实际发送的数据包依然很大，并且在UDP层面上写入多大的数据就会发出相同大小的数据包，在这种情况下如果数据量过大，则会被IP或数据链路层分割成更小的数据报进行传输。 这段开发经历让我们意识到视频监控系统设计中的许多挑战和需要考虑的因素。