我买了个二手房，第二次签署了协议书，贷款下不来给退所有费用，这算我违约，算我不配合

我买了个二手房，已经面签两次了，第二次签署了协议书，贷款下不来给退所有费用，这次银行这说当时的材料我们审批不了，如果想过需要改材料，我不想再改材料了，如果退房，这算我违约，算我不配合？