本发明公开了一种偏振视觉系统中自适应确定偏振镜的最佳透振方向的方法,通过任意三幅已知透振方向的偏振图像,合成任意透振方向的偏振图像,通过对这些偏振图像进行清晰度的评价,从而为偏振视觉系统确定最佳的透振方向。本发明提供了一种廉价、客观、方便的方法,解决了现有偏振视觉系统中偏振镜方向难以确定的问题;而且确定了最佳透振方向后,可以最大程度消除杂散光影响,大大地提高成像质量。