房屋认购协议的钱，如果约定是定金，除了协商一致外则不可以退回。商品房认购书指购房者与开发商签订的一份合同，而且独立于正式房屋买卖合同。认购书并不是购房过程中的必须的法律程序，认购书视为要约合同。虽然认购书所约定的购买行为有效，但是买卖双方仍需签订正式的购房合同。
法律依据:
《中华人民共和国民法典》第五百八十七条债务人履行债务的，定金应当抵作价款或者收回。给付定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，无权请求返还定金；收受定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，应当双倍返还定金。
