分析了对海红外成像特征以及图像处理的技术难点。设计了一种海空背景下对舰船目标进行自动识别和跟踪的图像处理系统。首先,介绍了采用目标跟踪和识别算法并行工作的软件设计,该设计充分融合跟踪和识别处理信息。然后介绍了基于双DSP和FPGA构架的硬件设计,以DSP作为核心处理单元,FPGA作为控制单元。最后给出了外场试验实验数据,验证了该红外图像处理系统具有良好的实时性和适应性。