针对单目视频序列中非刚性动态目标重建算法的非在线批处理问题，采用了基于模板的能量最小化方法，通过优化目标能量函数，得到模板与输入动态视频序列每一帧中目标的对应关系，完成了序列在线式的非刚性动态目标的跟踪和重建。针对上述方法，采用了Ceres非线性优化库，完成了动态重建系统的设计和实现。实验证明该系统可以对单目视频序列中非刚性动态目标进行有效跟踪和重建。