经典均值漂移跟踪器(MST)和模板匹配跟踪器(TMT)在性能的许多方面具有强互补性。为利用这种互补性提高跟踪的可靠性，提出了一种混合跟踪算法(HTA)。HTA维持了颜色直方图和亮度模板两种目标模型，并分别以TMT和MST为主、辅跟踪器。当目标被遮挡或周围出现相似颜色模式的干扰物而造成主跟踪器错跟时，算法自动切换到辅跟踪器进行纠错；干扰消失或目标被重新捕获时，可自动切换到主跟踪器。实验结果表明，HTA对复杂跟踪环境适应性强且计算量不大。