针对传统的特征点在目标追踪算法中鲁棒性不强和基于先验知识的目标追踪算法模型漂移的问题,提出一种基于光照不变特征的无模式跟踪算法。采用无模式追踪的思想,利用敏感直方图提取二值化的光照不变特征,用双向光流跟踪和全局匹配算法进行筛选得到稳定特征点,根据特征点的投票结果进行聚类确定目标中心,实现目标追踪。通过实验验证了该方法在光照变换、部分遮挡、运动模糊等情况下都表现出较好的追踪效果和鲁棒性。