房贷不成，退房

我情况是这样的，我于2007年12月16日在遂宁一处房地产公司已房贷的形式购买一套住房并交了首付，在银行办理贷款的过程中银行以我在外地购买一套住房（也是以房贷的形式购买的，有几次没按时还款）信用度不高，而拒绝贷款。我只好退房，但是房地产公司要收取违约金6000多（总房款的3%）和在房管所存档费用和税款8000多（总房款的4、05%），也就是买房不成被拖了一年，还要收取1万多，这种合理吗？多次找房地公司没结果