针对时空上下文算法首帧需进行手动框选及选择偏差带来后续跟踪干扰的不足,提出利用Adaboost算法进行首帧检测,引入Kalman预测机制辅助时空上下文算法进行跟踪。当出现遮挡、抖动等问题时,保证跟踪稳定地进行,提高算法鲁棒性。在Shelter1等3组公共数据集上进行对比实验的结果表明,该算法能实现首帧自动检测功能,后续跟踪算法的鲁棒性及跟踪效果也得到明显提升。