针对多端全景摄像机在视频图像拼接过程中的耗时长的问题，探索采用一种设计方法，通过从算法和系统优化设计入手，采用简化的SIFT算法，并且将FPGA平台与此算法计算分离，转而由ARM来承担图像配准参数的计算，由FPGA平台依据参数结果进行全景视频图像的拼接。本文涉及了应用FPGA系统设计实现对具体参数的接收、计算和对视频图像的缩放、平移以及最终的仿真调试等。实验表明：全景视频图像经过这种方法拼接后能实时显示在屏幕上且效果良好。