准备买房时提取的公积金，在退房时为何先要退了自己所提取的公积金才可退房本人是内蒙古乌兰察布

您好，请问一下，我们准备要买单位因照顾职工所分配的房子，，我们已经付给单位12万定金，可是因我母亲生病原因，经济条件有限，支付不起该单位房子的各种款项，并且要去外地看病。而今天我们在单位房管退房时，房管工作人员却对我们说，必须先退掉我们取出的公积金，再退掉合同，才可以退房，并且还回12万定金。公积金是我们自己的钱，是职工们辛苦每年单位扣了7000多块钱工资积攒起来的。请问 ，难道非要退回公积金才可以退房·退定金吗？