诚意金能退吗

我五月份在**花园售楼处看中一套房,因这个房刚开始修,售楼小姐说要先交五万块钱就有这套房的优先购买权,楼房修到三层大概十月份左右签合同.于是我们把钱交了,并签了一份住房诚意书.但因五月十二号发生大地震,我们无论是在经济上还是在精神上都受到很大创伤.因我们选的六楼,现在觉得楼层太高.最主要原因我们现在已无经济能力买房,因此想退掉这套房.找开发商很多次他们要么说不退,要么说管事的不在,要么说他们做不了主.请问我们这种情况钱可以退吗?怎样才能拿回诚意金.