我是银行按揭贷款，但因我们夫妻是在另外一个城市买的房，我向开发商要求退房，请问这个违约金我应该给吗

我是银行按揭贷款，但因我们夫妻是在另外一个城市买的房，主要是为以后做打算，所以才在另外一个城市买房，我们提供的贷款资料也很齐全，但就是我们不在当地工作，所以贷款没有批下来，我向开发商要求退房，但开发商要求我赔违约金，请问这个违约金我应该给吗？谢谢！