高通专利介绍用于联合场景分割、一次性长期对象追踪的场景分割和对象追踪方法
高效的多任务解决方案,使得系统的计算成本较低
(映维网Nweon 2023年12月19日)扩展现实设备可以通过摄像头来检测、追踪和识别目标事件或对象。对象检测可用于检测或识别图像或帧中的对象,并且可以执行对象追踪,以便随时间追踪检测到的对象。同时,可以执行图像分割来检测帧中的多个片段,对其进行分析和处理以执行所需的图像处理任务或生成所需的图像效果。
现有的场景分割和/或目标追踪解决方案有一定的局限性。例如,用于对象追踪的解决方案的示例包括在前一帧中目标对象的位置附近的区域中执行本地搜索。然而,执行这种局部搜索依赖于基于前一帧的预测,这可能适合于短期追踪,但不能用于在大量帧(例如超过5帧)重新检测目标对象。
用于对象追踪解决方案的另一个示例包括通过基于对象检测结果搜索目标对象来执行检测和追踪。这种解决方案的一个问题是,它依赖于对象检测。这有一定的问题。例如,对象检测受到可检测的预定义类的限制,不属于预定义类的任何对象都无法检测到。另外,目标检测是一个复杂的过程,需要大量的计算资源。
另一种解决方案涉及使用单独的分割和追踪模型,但由于使用两个模型,这可能具有很高的计算成本。
......(全文 4593 字,剩余 4139 字)