面向机器的视频编码：SIFT 特征的部分传输
图像与视频处理
2022-01-11 v1 计算机视觉与模式识别
多媒体
摘要
本文研究面向机器的视频编码，这是视频编码中与人和机器消费解码视频相关的新范式。对于此类任务，压缩视频与特征的联合传输被加以考虑。在本文中，我们将特征的研究聚焦于 SIFT 关键点。与从原始视频提取的 SIFT 关键点相比，从解码视频中提取的关键点在数量及其参数上均存在损失。针对 HEVC 和 VVC，此类损失作为量化参数和码率的函数被加以研究。在本文中，我们提出将残差特征数据与压缩视频一同传输。因此，即便对于强压缩视频，也避免了完整所有 SIFT 关键点信息的传输。
引用
@article{arxiv.2201.02689,
title = {Video Coding for Machines: Partial transmission of SIFT features},
author = {Sławomir Maćkowiak and Marek Domański and Sławomir Różek and Dominik Cywiński and Jakub Szkiełda},
journal= {arXiv preprint arXiv:2201.02689},
year = {2022}
}