在实际场景下，由于目标快速运动，遮挡、复杂背景等因素影响，使得对运动目标的跟踪效果较差。为了解决上述问题，提出了一种基于有效特征点的自适应目标跟踪算法，实现对运动目标的稳定实时跟踪。首先对光流法追踪及特征点匹配得到的稳定特征点进行融合，得出能有效代表目标的特征点。然后利用上述特征点求出目标的角度变化和尺度变化，进而实现对目标的跟踪。其中，在特征点匹配过程中，采用马尔科夫方向预测器求出目标框在下一时刻中的大概位置，缩小了检测区域并增强了对相似目标的辨识能力。实验表明，该方法具有较高的跟踪精度、处理速度和鲁棒性，尤其是当目标快速运动或者发生形变时，能够有效的减少中心错误率。