本发明公开了一种深度图像分层方法及系统。所述方法包括:获取当前帧的RGB图和当前帧的深度图;根据当前帧的RGB图和上一帧的RGB图计算初始光流;初始光流包括多个光流值;利用K均值算法对初始光流进行聚类得到K个初始聚类;一个初始聚类对应一个高斯模型;对于任意一个光流值,执行二次聚类过程,得到光流值的二次聚类结果;根据所有光流值的二次聚类结果对当前帧的深度图进行分层得到分层结果。本发明利用RGB图和高斯模型对光流值进行聚类,从而实现深度图的分层,提高了深度图分层的准确性。