针对现代图像处理系统的计算量比较大，并且体积较小，而且具有较高的实时性，所以就研发了将DSP作为主处理，和FPGA技术作为辅助器的高性能实时图像处理系统，通过两种芯片不同的优势，将其中的算法划分成为两部分的内容，分别交给DSP和FPGA进行处理，从而有效提高算法效率。所设计的基于DSP和FPGA线性结构的计算机图像处理系统的结构较为简单，并且运行较为方便，添加相应的程序之后能够有效实现获得图像的识别、跟踪及匹配等处理。本文对系统的设计思想及硬件结构进行了详细的说明，并且实现了硬件系统的算法仿真及实验验证。通过实验结果表示，此系统具有较高的实时性，并且具有良好的实用性，能够有效满足系统的使用需求。