交了首付，能退房吗

老师： 您好，感谢你在百忙之中解答我的问题？ 我是宝鸡市一家国有企业的正式员工，我们单位今年8月份建房，我交了首付（30%），但是当时只是开了收据，没有任何签合同。现在由于单位不承诺什么时候房子能盖起来，而且房子基础埋深不符合国家规范要求，我要求退房，将我的首付还给我，当然我个人提出支付适当的违约金，可是单位死活不同意，单位称：“既然你把首付已经交了，那么就等于你和单位签了合同了。” 不知道单位说法正确吗？我如何做较为妥当？还请老师给予解惑！我由衷的感谢！