摘要
在实时视频通信中,网络环境往往复杂多变,导致视频数据的传输出现不同程度延迟,影响用户体验.为此,提出基于多模态融合与注意力机制的实时视频通信延迟补偿方法.利用多模态融合技术与注意力机制深度提取并强化了实时视频通信延迟中关键的延迟特征,以此准确预测并计算实时视频通信的延迟.基于这些精准数据,建立延迟补偿器模型,进一步优化数据帧处理路径,实现实时视频通信的延迟补偿.仿真测试表明,所提出的方法能够将视频通信整体延迟时间控制在0.3 s内,证明基于多模态融合与注意力机制的实时视频通信延迟补偿方法能够显著减少延迟,确保通信流畅无阻,给用户带来即时互动的极致体验.